ЈУЛИ-СЕПТЕМБАР, 2022. 


ИНФОРМАТИЧКА ТЕОРИЈА !! 
НАСТАВАК ИНФОРМАТИЧКИХ ПРИЛОГА 


РАСТКО ВУКОВИЋ 
НЕКАД. ПРОФ. МАТЕМ. 
ГИМНАЗИЈА БАЊА ЛУКА 


ИНФОРМАТИЧКА ТЕОРИЈА || 


Растко Вуковић, јули-септембар. 2022. 
Информатичка Теорија |! – наставак информатичких прилога 
АЕр5:/ Лими. асадетта.еди/86097551 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


Предговор 

Ова скрипта је непосредни наставак „Информатичке Теорије“, која је садржавала наслове, почев 
од „1. Неквадратна матрица канала“, до „43. Условне вероватноће“. Нумерација тема се наставља 
редом. Обе скрипте рађене су на основу сећања и записа питања и одговора на Блогуг актуелном 
у вези са мојом теоријом информације. Ти се прорачуни, објашњења и докази лако заборављају и 
потребно их је негде остављати „за касније“, верујем. 


Текстови те прве скрипте (Информатичка Теорија |) завршени су и не намеравам их мењати какви 
год били разлози. Међутим, скрипта коју пишем, у текућим поглављима, увек је препуна лапсуса, 
рачунских грешки, погрешних претпоставки, на које се стално враћам и стално их исправљам. Као 
да више волим тражити и исправљати своје грешке него настављати са писањем, а заправо ради 
се о хипотезама које прво интуитивно постављам и током тестирам, дорађујем, или одбацујем. 


Наводим то јер радне текстове држим на интернету, када ми понеки пријатељ шеретски добаци 
„Аха, нашао сам ти грешку математичару!“, а ја му узвратим „Добро, у текућој је верзији, али чик 
ми нађи грешку у завршеној!“ Овде сам заглавио са недоследним заокруживањем вероватноћа 
прво на две, па три, шест и више децимала и, наравно, са различитим резулатима (нарочито од 
поглавља регресија фреквенција слова), а онда због погрешних претпоставки и лошим оценама. 


Аутор, 2022. 


: Информатичка Теорија 1, ћЕр5://агсћуе.огр/дега 5/1 20220709 


2 Блог, КЕр://гмикомсс.пе бЛов/ 
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М Део: Амплитуде 


Две вредности карактеристичне за осцилације су таласна дужина и амплитуда. Прва повезује број, 
фреквенцију понављања основне фазе у јединици времена и пређени пут, дакле брзину таласа, а 
друга нам каже нешто о одступању фазе таласа од њене средње вредности. У оба случаја ради се 
о неким вероватноћама. Прве о неодређености налажења таласа на датом месту, а друге о снази 
израза таласа, његовој моћи да комуницира са околином, односно шансама опажања осцилације, 
или онога што талас представља од стране других. 


Сматрам да Комптонов ефекат, поред познате интерпретације, говори о вероватноћи кретања са 
становишта саме честице-таласа (фотона), о неспонтаности скретања на мање густине положаја и 
праћењу таквих трајекторија као мање вероватних. Оно што се дешава током судара је деловање 
силе која (према мојој теорији информације) мења перцепције и вероватноће, након чега следи 
скретање и расипање просто као ново „највероватније кретање“ (са становишта учесника). 


Мали је корак за физику до поменутог „информатичког“ тумачења Комптоновог расипања, а још је 
мањи до одговарајућег вероватносног тумачења таласне дужине и амплитуде (М/амејепећћ |). Ако, 
када та становишта једном усвојимо, онда ће третирања тих таласних карактеристика добијати на 
ширини и, верујем, на начине који су овде тек започети. 
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44. Сфере потенцијала 

замишљамо две лопте, већу са центром 5 полупречника Е и са центром О на њеној сфери мању 
лопту полупречника г. На слици је равни пресек тих лопти, по главној кружници К веће сфере и 
главној кружници К мање сфере. Пречник Р — 5 — О веће кружнице (К) је хипотенуза правоуглог 


п 


троугла РОА. Са периферије, тачке А = К п К, пречник РО види се под правим углом «(РАО) = В. 
а оштри углови, ф = «(АРО) утачки Р и фу = «(РОА) утачки О тог троугла, комплементни су, тј. 


Ф+Фф1= -- Централни угао веће кружнице «(В54) = 0 = = где такође тачка В Е К п К. За тачке 
С = АВ ПРО, 0 = К п РО требаће нам дужине Н = С0 ић = РС. 


Овако замишљамо простор вероватноћа, са груписањем вероватнијих догађаја све ближе центру 
веће лопте (5), при чему је њена сфера ма којег полупречника (8) увек граница вероватноћа. Она 
уравнотежује напетости унутрашње густине вероватноће и вањских сила неизвесности. Лопта са 
центром (0) на ободу веће представља (материјалну) тачку кратког домета деловања (7). Основне 
су теме (поводом претходних наслова) биле о релевантности односа дужина унутрашњег АРВ и 
вањског лука, посматрано из центра (0) мање кружнице (К), односно одговарајућих површина, те 
запремина мање сфере унутар и изван веће. У том тексту сам се определио за запремине, радећи 
по интуицији, али има смисла израчунавати односе површина, или дужина. 


Пример 1. Дужина лука (АОВ) кружнице (К) полупречника " је 1] = 27ф, = тл — 2тф = "(пл – 0). 
Остатак њеног обима је лук дужине [, = 2тл — [, = т(п + 0). Однос ових дужина, коефицијент, 
или „потенцијал“ ј' = 11:1, = (п – 0): (п + 0), можемо апроксимирати, јер за наше потребе већи 


полупречник (8) много је већи од мањег (г). Из – = 0 следи :: = зп ф ~ ф, а отудаб = 2ф = - 


паје ј' ~ 1– = 
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Пример 2. Израчунавамо однос површина делова мањег круга, заједничке унутрашњости К ПК 
према остатку. Површина одсечка (АОВ) већег круга је Р' = -Е2 20 — -К2 з511(20), а површина 


одсечка (АРВ) мањег је Р" = = 72 "2Фф1 — -72 з51(2ф1). То су разлике површине кружног исечка и 


А п п–60 т 
троугла унутар. Овде је и даље фа = = – Ф= == ид = јој | 0, па налазимо: 


2 2 


К т 
Р' = => 20 – з120), Р" = > 291 – пп 2ф1) 


2 а 
Р, = Р' + РВ" = 77 |(20 – аге) + (1 = 0 – зао) 


5 5 б т И а 
јер је чп х — х, када х > 0,а 20 = = Тако ова Р,, заједничка површина кругова, постаје: 


ЛЕ и ИН ВЕБ за) == (1 =) 
о ра да "2 ле 
Површина Р, остатка мањег круга је: 
ва ва ла (121) 
аи сав ака -7 с | 
Њихов количник 
,„ 27Т 
ере 1-–ђ 
2 пЕ 


је коефицијент који дефинише „потенцијал“ у случају површина делова круга. Приметимо да је 
исте ознаке, јер је исте вредности као и количник дужина, онај из прошлог примера. 


Пример 3. Потражимо однос површина калота мање кугле, дела унутар веће и остатка. Висина 
калоте, капице која је део мање сфере у већој лопти: 


девер тане ти он(-8 -иб- би 
= РС=" =" —тсо5ф, =7 сов [> – >) | =7 512) ~ Т 2 
па је површина калоте 
0 
Р, = Хупћ ~ 2тп (1 – >) 
Површина остатка мање сфере је: 
0 
Р; = Ауп — Р, ~ 2771 (1 + >) 


па је одностих површина: 
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ЛЕ ал ЦИЕ 
Р; 2г2п (1+5) 2 
ма 17 
ј 2К 


То је коефицијент који дефинише „потенцијал“ у случају површина делова сфере. [0 


Разлика коефицијената односа површине калоте дужина лукова је: 


ми '=( ==) (1 – =) = Е> 0 
| = 2 пб) 2пе 


па је /"' > Ј'". У „Информатичкој Теорији“, у наслову „38. Виртуелне сфере“ за коефицијент, однос 
запремина заједничог дела и остатка мање лопте, који дефинише „потенцијал“ добијено је 


Поредак је 0 < ] <]' <]" < 1. Свеједно, сва три коефицијента дефинишу у бити исту врсту 
потенцијала, они дефинишу силе које опадју са квадратом удаљености К. Најмањи од ова три 
потенцијала упоређен са релативистичким гравитационим даје: 


Ј = доо 

Зт - 
1–—=71—–— 

4К К 

Зт 

1 


где је К; = 26М /с% Шварцшилдов полупречник;, у којем је 6 гравитациона константа, М је маса 
тела које гравитационо привлачи, а с је брзина светлости у вакууму. 


3 Простор-Време, 1.2.10 Шварцшилдово решење, ћЕр://микомс.пе Ккпјре/Ргозјог-Мгете.рдћ 
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45. Силе вероватноће 

У апстрактном 3-Д простору вероватноћа замишљамо центре око којих се групишу извесности, 
постепено све већих вероватноћа што је удаљеност од центра мања. Та се идеја може разумевати 
помоћу графова расподела, рецимо Бернулијеве и њених апроксимација Пуасонове и Гаусове, 
који нам могу изгледати као да нека „сила“ нагомилава већи број исхода око средњих вредности. 
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На википедији можете погледати објашњење ових графова нормалне расподеле (Гаусове), ради 
инспирације, али дубљи разлог потраге за овим силама је у литератури подразумеван и никада до 
краја експлицитно изречен „принцип вероватноће“, да се вероватнији исходи чешће догађају. 


Знамо да је и у физици упитан онај стари концепт силе из прошлих векова, који је за гравитацију 
Ајнштајн (1916) допунио закривљеним простором, дакле врстом „спонтаности“ које управо овде 
разоткривамо. Спонтано, чешће се догађају вероватнији исходи, топлота прелази са тела ниже на 
суседно тело више температуре, системи се настоје развијати ка мање информативнима, физичка 
кретања се подвргавају принципу најмањег дејства. 


Сила о којој је овде реч припада поопштеној спонтаности, али опет, њене форме“ проналазимо у 
Кеплеровом другом закону, у „кретању набоја“ по коникама, по деловању „брзином светлости“ и 
по опадању са квадратом удаљености. Сваки од тих феномена, аналогија, потребно је посебно и 
пажљиво преиспитати. Нешто од тога урадићу одмах. 
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Сфере потенцијала посматрамо ванвременски, као неку поставку позорнице на којој се тек требају 
појављивати неки догађати. Претпостављамо да је могуће такво безвременско, апстрактно стање 
и да је оно у том смислу врста математичке структуре. Међутим, црпимо инспирацију из физике. 


У мојој теорији вероватноће, већ одавно рутински посматрам светлост, електромагнетне таласе и 
уопште фотоне, или друге објекте који би се кретали том брзином као безвременске, таквима који 
своју реалност дугују својим посматрачима. Објекти којима време не тече постоје у простору тамо 
су где им је највероватније место и биће на таквом месту и у следећем тренутку сваког релативног 
посматрача, у датој ситуацији коју може мењати само сила, а која је увек промена настала меном 
ситуација. 


Сила мења вероватноће и промена вероватноћа нека су сила, становиште је које заступам својом 
теоријом информације. Поремећај вероватноће значи присуство силе – реченица је мојих текстова 
одавно, као и – чаша је на столу зато што јој је тамо највероватније место и биће тамо и убудуће 
све док на чашу не делује нека сила или неко друго тело, попут руке која ће чашу склонити. 


У складу са реченим, безвременска тела тамо су где су, а посматрачи су ти који им „додају“ своје 
време, процесе и промене. Зато је брзина светлости независна од брзине извора, јер тек брзина 
промена онога ко светлост посматра даје њој брзину. Према томе, садашњост сваког од нас, сваке 
реалности, помера се дуж временске осе брзином светлости. 


Аналогно, сфере потенцијала у свом математичком концепту статичне су, а динамику добијају тек 
опажањем од стране субјеката којима време тече. Обзиром на ток садашњости, од прошлости ка 
будућности, од исказане информације ка неисказаној, од реализованог ка нереализованом, сфере 
потенцијала биће виђане у ширењу. 


Сви делови сваке поједине од тих „ширећих сфера“ истовремени су, што значи квантно спрегнути, 
те им у физичком смислу таласне дужине могу бити исте, а амплитуде све мање, као и другим тако 
ширећим таласима. То, пак, значи да свака од сфера носи исту „енергију“ или „импус“, али њене 
шансе интеракције са евентуалним другим објектом опадају са повећањем полупречника. Ово је 
прилично у складу са претходним, оним какве смо те сфере потенцијала откривали упоредо кроз 
праве физичке константне централне силе. 


То нас доводи до „закона одржања“ вероватноће, такође подразумеваног у теорији информације 
(мојој), али раритета у званичној науци. Како онда такав повезати са нечим физичким – питаћете 
се, а одговор је – помоћу енергије. Како важи закон одржања енергије, или масе (Е = тс“), треба 
пратити израчунавања о вертикалном паду“ као аналогију и добити нешто попут тамошњег 


2 
т = требм/ве 
где би маса т тела које пада била т), у одсуству гравитације. Развојем израза у Маклоренов ред и 
занемаривањем виших степена малих чланова, видимо да можемо писати 


ту 
ам 
рута 


т. = 
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што значи да коефицијент повећања масе у гравитационом пољу 


макар формално одговара горе поменутом [44.] односу запремина ] заједничог дела и остатка 
мање лопте, који дефинише „потенцијал вероватноћа“. Израчуната брзина сателита (у књизи из 


линка), је у = /аМ/К, што долази из закона одржања енергије (масе) и преласка потенцијалне 
енергије гравитационог поља у кинетичку, приликом слободног пада. 


Речником енергије, релативне Е и сопствене Ер, долазимо до истог. Штавише, постоји аналогија 
између ових коефицијената опште и специјалне теорије релативности: 


Е те Ту | 
те2 = Е = == = == = тос2у ~ трса (: У = КЕ) + – ту“ 


Ен 12 2 с2 2 
с2 М с2 


Што је разлагање укупне релативне енергије (Е = Е, + Еј) на сопствену, коју класична физика 
. 1 Ј . 
назива потенцијалном (Е) = Ер), и кинетичку (Еу = - 07"). То што је данас и више од аналогије 


за теоријску физику, ширимо даље на нови терен у теорију вероватноће. 


Другим речима, за наводне потенцијале сфера вероватноћа можемо писати: 


Т ~ Бо = е“ Ек/Ер 
Е 
а то значи да ће брзина у, која дефинише кинетичку енергију тела у слободном паду, одговарати 
случајној варијабли х нормалне расподеле вероватноћа. Коефицијент, или потенцијал сфере тако 
постаје 


„1558 


Дик — 


што је заправо густина нормалне (Гаусове) расподеле. 
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46. Информација сфера 

Сфере потенцијала, којима се у овим узастопним насловима бавимо, статичне су. Попут таблице 
множења, оне су апстрактне конструкције без рецимо мењања током времена. Развојност њима 
долази од релативних посматрача чија времена „теку брзином светлости“. Време (1) тако постаје 
имагинарна (12 = —1) дужина (х, = 1с1) која би се могла прећи брзином светлости (с). Димензија 
времена има више. 


Свет сваког од релативних посматрача потенцијалних сфера структуриран је информацијом чија 
суштина је неизвесност, ради чега није могуће реализовати реализовану информацију. Поновљена 
„вест“ није више вест, нити је са становишта истог посматрача узастопно виђење тачно исте сфере 
могуће. Сваки од посматрача стално се мења, односно његова околина, па онда ни он у њој никад 
нису исти. Сфере потенцијала које они могу видети шире се, титрају, носе потенцијал информације 
и понекад интерагују. 


Укупна површина сфере расте са квадратом полупречника (17 = К2п), а тако се смањује и густина 
јединичне њене површине (специфична густина), опада јој амплитуда иако таласна дужина остаје 
иста (које постоје само у виђењу њеног релативног посматрача). Површина дате сфере тренутна је, 
што значи да је квантно спрегнута, те се сва испоручује у евентуалној интеракцији. 


Вероватноћа р Е (0,1) интеракције јединичне површине сфере опада са квадратом полупречника 
К. Она носи информацију“ ћ = — пр Е (0, + 00), количину за коју претпостављамо да не зависи од 
избора дела њене јединичне површине. Не догађа се непосредна укупна интеракција другог тела 
са целом сфером, јер је истовременост сфере њена индивидуална појава. Чак ни наше ноге нису 
истовремене са главом, јер је светлости потребно неко време да стигне са краја на крај, а камоли 
да нам делови какве веће сфере могу бити истовремени. Зато опажања делова сфере сматрајмо 
различитим (дисјунктним) догађајима. 


Вероватноћа интеракције јединичне површине сфере има униформну расподелу р = 1/К 21, њој 
одговара Хартлијева информација 1(К) = — Јп(Е2т) која се мења брзином: 


аћ јак С 

фш _ ва ЕР 
или једноставније писано Ећ + с =0. Информација дела сфере смањује се са повећањем њеног 
полупречника, што према начелном минимализму информације значи да се сфера шири. 


Иначе, тамо где нема промене вероватноће, нема ни промене Хартлијеве информације, изр = 0 
следи ћ = 0, а исто важи за Шенонову. Ово друго видимо из: 


а5 


а 
5 = РЋ = – у Фа ара + не гРруаћи) = – (ап р1 + 21) и а (Фујпру Ра] 


Отуда, ако је свако р,, = 0 редом за » = 1,...,п онда је 5 = 0. Дакле, из константности вероватноћа 
следи константност информације. Овде је 71, ..., р, била нека расподела вероватноћа, а Шенонова 
информација 5 = 5(п) = —(р [пр + + р,1п р1) је њихова средња вредност. 
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Приметимо да је Шенонова информација (дела сфере потенцијала) све већа када п расте. Наиме, 
. : 10. 
ако на п делова делимо равномерну расподелу, поједина вероватноћа је р) = = па је Шенонова 


информација: 
5(п) = –(рајпрз +: Фра рл) = 
1 1 11 1 1 
– (прва ве жетва) = пл ++ ал = јал 
п п п п п п 


ап < |и(п + 1), тј. 5(п) < 5(п + 1). Са друге стране гледано, такође је узорак дела сфере дате, 
рецимо јединичне, површине све информативнији, јер већа сфера граница је већој неизвесности. 


Међутим, удео информације у поједином делу, сабирку Шенонове информације, све је мањи, јер 


1 
пр] (о + 1) < пп 


за свако п > е = 2.71828... Доказ је извод функције Ј (Х) = = 1п х, који је 


1—1пх 
од с аа 0 


за 1пх > 1,7тј. х > е, када је ова функција опадајућа и важи претходна неједнакост. То би ишло са 
смањивањем дела површине растуће сфере репрезентативног за комуникацију. 


На начин сличних сфера објашњавао сам ширење виртуелни фотона око електрона, иза тестирања 
дубљег смисла у Фајнмановим дијаграмима“: „Да би узрок одбијања електрона Кулоновом силом 
(пропорционалном наелектрисањима честица а обрнуто пропорционалном квадрату растојања 
између њих) били виртуелни фотони, не треба их третирати као одскакивања пинг-понг лоптице. 
Рачун ће бити тачан тек ако фотон замишљамо као виртуелну сферу која се шири из центра (сваког 
од) електрона.“ Размене теку у пакетима, испоруком кванта дејства настаје дефицит информације, 
а због начелног минимализма (привлачности мањка) информације, настаје супротна емисија. 


У случају мало општије, информације перцепције 5 = ху у, + ::: + хуул, Која је скаларни производ 
вектора Х = (21, ...,Ху) и У = (ул, -., У), постоје даље могућности одржања. На пример, из 


5 = (уј НЕ ул) + - + (Хлуп + Хидп) 


може се добити константност у времену, 5 = 0, ако је Ху, + х,у, = 0 редом за свако у = 1,...,п. 
То значи раст прве варијабле када друга опада и обрнуто, осциловање какво се заиста догађа. 
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47. Осцилације 
Периодичне појаве су начин да се одржавају количине, а да системи који немају „памћење“ стару 
вест опет виде као нову. За системе са слабим памћењем излаз је слаба периодичност, а у случају 


појава јачег памћења ту су „понављања“ на увек довољним изузецима. Такав је свет засниван на 
информацијама чија суштина је неизвесност. 


Као што знамо, диференцијал производа је а(ху) = (ах)у + х(ау). Он може бити нула, а да се те 
две величине стално мењају, (ах)у = –х(а у), када повећање једне прати одговарајуће смањење 
друге тако да трајно буде а (ху) = 0. Када имамо спрегу 5 = ху у, + -:: + Ху ул, Компоненти низова 
Х = (Х, ..,Ха) и У = (ул, .., Уп), исто је могуће са сваким паром фактора у њеним сабирцима. Ово 
показује значај информације перцепције у теорији информације каквом је развијам. 


Периодична непрекидна таласна функција у = 1у(Хл, ...,Х,) задовољава таласну једначину 


92 о“ 92 
= = " - + Наг - 
дЕ дху дх 


где је с“ реална константа. У физици : је време, па надовезујући се на разматрања из претходних 
наслова, да се садашњост кроз простор-време васионе креће брзином светлости, тада је с брзина 
светлости. Такво време постаје просторна координата т = 1с1, где за имагинарну јединицу важи 
једнакост 12 = —1 и у физичком 4-Д простор-времену можемо писати 


А РОА 


ев =0 
ох" ду 02  -0т 


дћу ду д7у 1д7у _ 
дхг ду: 022 с2020 


у 5 | МИ 
а то је таласна једначина која следи из Максвелових радова о електромагнетизму, где је == = Иде, 


ад = 4пх 1077 М/А2 магнетна, а гр, = 8,854 х 10712 Е/т електрична константа пермеабилности 
вакуума. 


Симетрија просторних и временских координата већ је примећена у физици, путем Максвелових 
једначина, па теоријом релативности, али она никада није довољно експлицитно изражена као у 
открићу 6-Д простор-времена „теорије информације“ (Рутепзјоп5). Међутим, ни то није довољно, 
или кажимо да је прихватање нових димензија времена отварање путева у псеудо-реалности, а то 
даље у тумачење комплексних бројева као врсте величина „стварности“ (5ојепојд). 


На случајан начин честица бира више могућности, од којих ће нека бити да она остаје у „нашој“ 
реалности. Међутим, њен другачији избор „постојаће“ и у некој од псеудо-реалности, из које она 
даље може опет бирати, а ако је неки од тих избора полазна реалност настаје појава коју називам 
„заобилажење“ (Вура5о). Алгебарски, то би значило да било која па и реална функција, | (х) Е К 
за свако х Е К, која би била неко комплексно решење датог задатка, ] (2) Е С за 6 (С, сабрана са 
себи коњугованом вредношћу ј " (2), давала би реалну вредност / +] ЕК. 


8 Простор-Време, Пример 1.4.3. ћЕр://'микомс.пе Ккпјве/Ргозтог-Угете.раћ 
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Има и други начини да се добије реалан број алгебарским операцијама са комплексним, наравно, 
а и многих од њих који би интерпретирали физичке појаве у процесима „заобилажења“. Новост је 
(моје) теорије информације објава да би такав рачун имао неког физичког смисла. 


За представљање решења произвољне полиномске једначине (ср + с12 + с127 + + с,2" = 0) са 
реалним коефицијентима нису довољни реални бројеви, али са комплексним се могу исказати сви 
корени таквих, чак и ако су јој коефицијенти комплексни. Та универзалност комплексних бројева у 
сличним ситуацијама даје прилику да, бар привремено, заокружимо причу о простору, времену и 

материји на поменутих 3+3 димензије простора и времена, чија структура је информација, а њена 

дубља суштина неизвесност. 


Тако долазимо до универзалног комплексног броја, којег пишемо на различите начине: 
е'% = ехраф) = с5ф = созф + 51 ф 
Његов модуо, интензитет је један |! 9 | = 1, а множење 
њиме произвољног броја 
г=а+%ђ =7е8, 
где је 


у = |2] = ма + Бг итрб = 


“ 
представља ротацију датог у комплексној равни око 
њеног исходишта за угао ф. Наиме, у најопштијем случају 
2 = те!“ (за а = 0, +2п, +Ап, ...тај број је реалан): 

229 = тебе! = те е+9), 


Међутим, ротација је таква изометријска трансформација 
(која чува удаљености тачака) која може заменити све остале (транслације, рефлексије, ротације). 


Тим двема „универзалностима“ комплексних бројева, у исказивању решења једначина и замена у 
описивању изометријских трансформација, треба додати и физичке процесе који изражавају закон 
одржања. У просторима вероватноћа, удаљености су величине, какве су посебно и обзервабле. То 
последње на свој начин примећено је у квантној физици. 


Шлаг на торту овде пробране ретроспективе о осцилацијама су логаритми комплексних бројева 
[082 = Јпт + 10 


који не мењају вредност након пуне ротације, за угао 2Кп, где је К произвољан цели број. Дакле, 
када угао 0 заменимо углом 6 + 2Кл добићемо исту вредност овог логаритма, па је функција Г02 27 
периодична. Проширењем Хартлијеве информације (1. = 105 2), са изворно 2 природних бројева, 
па на позитивне реалне и коначно на комплексне бројеве добијамо начин за опис света каквим он 
јесте, структуриран периодичним информацијама. У Причама о информацији (2.1 Фреквенција) 
писао сам један популаран, можда необичан прилог о осцилацијама који препоручујем, ако вам је 
овај текст био претежак. 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


48. Лапласова трансформација 

Лапласова трансформација је једна од разних математици познатих трансформација интеграла, уз 
Фуријеову, Пуасонову, Мелинову и сличне. Њоме решавамо диференцијалне једначине рецимо, 
трансформишући их у алгебарске чији резултат затим враћамо инвезијом. Рачунске поступке овм 
трансформацијом сводимо на алгебарске, пресликавамо величине које су функције времена [ у 
функције комплексне варијабле 2. 

Нека је Е скуп реалних или комплексних функција ] реалне променљиве 7, 0 < 1 < +о0, које су 
непрекидне у скоро свим (сем можда у изолованим) тачкама домена и нека постоји Јој а за 
свако 0 < а <ђ < оо. Функција ] не мора бити ограничена за све променљиве, али за бар један 


: : А Т. 
реалан или комплексан број 2 постоји граница Да ЈЕ е"“ ја. 
—ео 


Дефиниција 1. За функцију / С Е, интеграл 2(7(1)) = Је: е“7# [ (6) аЕ називамо „Лапласовим 
интегралом“ те функције, а Е (2) = 24] (6)) називамо „Лапласовом трансформацијом“. 
Кажемо да је интеграл „апсолутно конвергентан“ ако постоји Да јр |е “= 760] 4: тако да за све 


Т' > Т важи | ет) 4 < Ј; је“ 70] а; — 0 када : — 0. Функција је „експоненцијално 


оганичена“ ако постоје константе а > 0 иђ Е К такве да за неко 6) > 0 вреди |[ (1)] < ае'" када 
2 > 60. Функција Ј је део по део непрекидна на интервалу [0, со) ако постоји ти, Ј6) = ј(0"ји 
— 


непрекидна је на сваком коначном интервалу (71,7) осим у евентуално коначно много тачака у 
којима има прекиде. 


Теорема множења (Борелова теорема) говори о „конволуцији“ функције Ј (х) и 9(х) означавану 
са [ (6)  4(0) за коју важи ДАЈ + 9) = А 14). 


48.1. Основне особине 
Са операцијама сабирања и множења комплексним бројем, скуп Е има структуру векторског 
простора над телом комплексних бројева. То следи из линеарности: 


со со 


Кеј фсђ] = | е [с (6) + ср ја = а | ера + о | е рт) а 
0 0 0 
Важи „теорема сличности“ која каже да је 


1 /2 
Г 0ј=—–]7 |- 
(ба) = =1 (2) 
и „теорема померања“, једнакост 
Е(г – а) = Је“ [(1)] 


Обе важе у условима када дати интергал постоји (рецимо експоненцијалне ограничености). Њих је 
лако доказати. 


Лапласова трансформација се у математици користи за анализирање линеарних, временски 
непроменљивих система, какве имамо код електричних кола, хармонијских осцилатора, оптичких 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


уређаја и механичких система. Има примене у решавању диференцијалних једначина и теорији 
вероватноће. Због овако велике применљивости неће бити чудно да ускоро откријемо и велику 
применљивост Лапласове трансформације у (будућој) теорији информације. 


Пример 1. Показати да је: [с] = > Ее(2)>0,С Е С. 


: = | одеш ПИ И о они = 
Решење: [12] = Е(2) = Ј, е нсфе=-] ( 2“) 4(– 21) = -(-е и) => 49 


2 


Пример 2. Ако је [ (6) = е!",Ђ Е К, тада је [27] = —. 


со 


Решење: Ме! ") = | е“ "ега = је “О а = — о ех ах = ехо у = 


Ево још неколико примера Лапласове трансформације, за п = 1,2,3,..,ђ > 0, Гама функцију, 
косинус, синус и хиперболни косинуси синус. Доказе можете наћи на много места. 


О 20) ТО) 20 
1 - 2 – 
2 2 —ђ 
1 2 
6 Ра сова! перу 
12 = таг – 
23 22 + аз2 
п! 2 
ЈЕ ет таг Редни 
Гб +1) а 
ђ СИ а 
[и ВЕЕ зћај => 


Следећи пример је заправо позната „теорема о помаку“. Зато наводим и доказ, иако није тежак. 


Пример 3. Како је Е(2) = је е“= ј(т)а, за биће: 


НО | са ба = | е“жјеђе (рујае = пећ (0) 
[0] [0] 


заг —Ђђ> 0. 0 


Последњим пример говори и о „чисто временском кашњењу“. Две функције истог облика, [ (Е ) и 
ТЕ — 60), где друга касни за првом за време 5), могуће је дефинисати са Д[ [ (Е – 5)] = е 7 К(2). 
Чисто временско кашњење има рецимо трофазни систем наизменичних струја. 


Користећи исти 3. пример, лако допуњавамо претходну табелу, налазимо: 


. БЕп Р и п! ћ 
•  акојеј(ћ)= 271", онда је 27) = те руа 

5 – ЂЕ 5 = г—рђ . 
• акојеј(е)= 27 сова, онда је 7) = еру та) 
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а 
(г–5)2+а = 


• акојеј(т)=е''чпаг, онда је 207) = 


Када је функција 7 (5) део по део непрекидна на интервалу [0, со) и експоненцијално ограничена, 
тада њена Лапласова трансформација постоји. То каже следећи пример, теорема егзистенције. 


Пример 4. Када је функција [ (Е) по деловима непрекидна за сваки коначни интервал где је Е > 0 
и ако је |[ (1)] < Ме'“ за све такве променљиве и неке константе ђ и М, тада постоји Лапласова 
трансформација дате функције за све 2 > ђ. Наиме: 

[о] 


| е"“јија 


о 


со со со 


М 
и = < | еј а < | е-= мета = М | отео фр = —-— 
[0] [0] [0] 


што је конвергенција. [0 


Две функције које имају једнаку Лапласову трансформацију потпуно су идентичне. Друга згода са 
Лапласовим трансформацијама је што множење и делење (2) = 2]]) одговара диференцирању 
и интегрирању функције Ј (1). На тај начин се сложене операције инфинитезималног рачуна своде 
на једноставне алгебарске. 


48.2. Инфинитезимале 
У условима егзистенције (ј је непрекидна за све променљиве ! > 0, и |[ (| < Међе! за неке 
константе ђ и М), важиће једнакости за изводе функције ]Ј (1) редом: 


ЈАЈ ) = 2141) – 100) 
Ај] = 2147) – 21 (0) – 7 (0) 
Ар] = 23241) – 2100) –— 21 (0) – 7 "(0) 


ЈА реј етен је (0) 


Наиме, 


со 


Хрђ = | «и 10 а = [о] у + | с“ тада 
[0] 


о 


Тиме је доказана наведена Лапласова трансформација за први извод. Уврштавањем те вредности 
у другу деривацију добијамо: 


МАЈ] = 21] )— 700) = 
= 21241) – 7 (0)] – Ј(0) 
= 2'14Ј) – 21 (0) – [ (0) 


Тиме је доказана ЛТ за други извод. Слично добијамо трећу и остале деривације. 
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а | ге) ај – 1 то 
[0] 


2 


Наиме, за 2 > 0 иђ > 0 претпоставимо да је интеграл 4(Е) = Ј, [6) 45 непрекидна функција. Из: 


(кој < Јусујаз<м | ега = 1 (27 –1) 
[0] [0] 


Следи ограниченост и д' (1) = Ј (1), осим у тачкама где Ј (6) има прекид. Отуда, према претходним 
једнакостима за изводе: 


ЈАТ) = 29 (0)) = 22490) – 900) 


па како је 9(0) = 0 добијамо 


1 
ду = - 24) 
а отуда горња једнакост за ЛТ интеграла. Примену ових формула видимо у следећем примеру. 
Пример 5. Решавамо диференцијалну једначину другог реда са константним коефицијентима 


У(Е) фау(в) + бу() = СЕ 


уз почетне услове у(0) = —1 и у(0) = 2. Узимамо Лапласову трансформацију леве и десне стране 
једнакости и на основу линеарности добијамо: 


Ју") + аду] + БАХ] = 11) 
г2у — з (0) – ['(0) + ајгу – Р(0)] + ВУ = ЈЕ 


с 
(2“ жаг +ВЈУ +2 а —2 = 


гдеје у = 207), [(0) = —1 и Ј['(0) = 2, а из таблице узимамо 2(С1) = сл) = с/22. Отуда 


—23 — (а – 2)2: + с 


Хајн 22(22 Фаг + 5) 


Добили смо алгебарску једначину која се назива „помоћна једначина“. Она се затим разлаже у 
„парцијалне разломке“ и из таблице налазе решења. [0 


Да би разумели о чему се ради у завршници 5. примера, ставимо а = —10,ђ = У ис = 5, ради 
поједностављивања и довршимо рачун: 


у) = —273 + 122 + 5 Б 5 . 12—2 – 
- _ 22(22 —102 +9) 22(2—9)(2—1) (2—9)(2—1) _ 
5 50 31 2 


"028 вти 8ие- 9) ==1 
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У литератури има довољно оваквих решења, намењених увежбавању. Приметимо да 
диференцијалне једначине говоре о улазним и излазним величинама. 


48.3. Инверзна трансформација 

Нека је 2 1 (1) = Р(2). Решење једначине Е (2) = | е“7 1 1 (1) де где је Е(Е) познато, назива се 
инверзна Лапласова трансформација и пише [ (6) = 27 (2 (2)). Основне особине инверзне 
Лапласове трансформације су: 

2“ Чар(а) + Б6(2)] = ај (с) + Б4(0); 

Б“ЧЕ(с2)) ==] (2); 

2"ЧЕ(г—В)) =<2" 10); 

2“ ЦЕО (2) = (= је); 

2" ЧЕ) (2)) = 10) + 9(0). 


Пример 9. Одређујемо инверзну Лапласову трансформацију функције 


с ве а > 


32 — 14 


Пиј 
а) = + 122 + 10 


Дату функцију трансформишемо у облик 


ТЕ 
- 3“. 4 
4(2+5) + 
погодан за читање решења из таблице. Даље је: 
3 37 37 
3 илро ј = 3 3 7—— 
Та) = 2" ЧЕ(2)ј = - 2 | ), 5 = -е “271 5 = 
24=–— 
1 
3 37 = 
пе р- пен 14—2— 
22 +- 6 72 + 1 
_3 2 ( : >) 
= 16 с052 – = 5112 


То је функција ] (5) чија је Лапласова трансфомација дата функција Р (2). 


Лапласова трансформација је „једнозначна“. То значи да задата функција комплексне варијабле, 
рецимо Е (2), која је Лапласова трансформација неке временске функције Ј (1) и уједно неке друге 
временске функције 4 (2), онда је разлика између функција ] (Е) и 4(() занемарљива. Искључујући 
ове тривијалне случајеве, ова једнозначност гарантује да је нека временска функција јединствено 


одређена својом Лаплацеовом трансформацијом. 
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из #(2) = 211 (6)) следи [ (6) = 2" ЧЕ(2)), другим речима функција Ј (1) је инверзна Лапласова 
трансформација од Е (2). 


48,4. Пригушивање 

Пример 6. Једначина т(Е) + ђу(Е) = ј (1) говори, лево од једнакости о траженим брзинама, на 
основу улазне силе Ј (1) на десној страни. Ставимо ли да замасут = 1 ђ = иу = и((), тоће 
бити „нема“ диференцијална једначина првог реда са константним коефицијентима 


У'(6) + 2у(0) = 1 (0) 


где улаз може бити и струја, а излаз напон и слично. Као иу 5. примеру, заменама ЛТ, налазимо 
овај пут помоћну једначину 


1 е 
27(2)+2 + 27 (2) = - 
коју затим треба разлагати у парцијалне разломке и из таблице (или израчунавањем обрнуте ЛТ) 
наћи решења. [Д 


Оно што Лапласова трансформација ради са улазном величином је пригушивање током времена, 


тако мењајући излазне резултате. Како она пригушује улаз, упоредо Фуријеовој трансформацији 
(која разлаже функцију времена у фреквенције које га чине), визуелно је приказано у занимљивом 
прилогу М/ћаћ дое5 Еће |арјасе Тгапзћогт Те! 5. Она је таква нарочито згодна за опис смањивавња 
густине вероватноће, или амплитуда, временом или повећањем полупречника виртуелних сфера 
које смо разматрали у претходним насловима. 


Пример 7. (Пригушена синусна функција) Нека за реални део комплексног броја важи Ее(2) > —а, 
за неки реалан позитиван број а и нека је: 


ја ј=е "атасх) =е"" Бо х(Е) 


Тада је Лапласова трансформација: 


К(ај = М7ђ = де "стосх( = ајее (== )хој = 


1 
5 = 2 ((е““воег _ ЗРЕО О) ли опјевао» = а У Јо) 


1 | 1 . 
= — Де о х(1)] —_ је а) 
21 21 
_ 1 | 1 1 | _ о) 
2: Ц2+а)—:0 (2+а)+:0) (2+а)2+ 002 
Област конвергенције ЛТ је Ке(2) > —а, дате пригушене синусне функције. [0 


Пример 8. (Пригушена косинусна функција) За реални део комплексног броја важи Ее(2) > —а, за 


неки реалан позитиван број а и дато је: 
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Т(6) = е7 сова х(Е) = е“" (—-=)жо 


Помоћу Лапласове трансформације добијамо: 


К(хј = Пт р= це ""атовхју= ај“ (==) = 


1 ; | 1 у | 
== (Списи + ва ид (3) = || ава + о Јо 
_ 1 | 1 у. 1 | и 2+а 
_ 212+(а— то) 2+(а+«к)! (2 + а)2 + (02 
Област конвергенције ЛТ такође је Ее(7) > —а, сада пригушене косинусне функције. [] 
ТОЈЕ 


Обзиром да је 2!" = соз ог + 1 51 оЈЕ, то за функцију 


ТО = е“ Пе у (к) = 27 (со об + 1511 О 0)Х(() 
Лапласову трансформацију добијамо као збир примера 7-8, односно: 


2 + (а + 10)) 


ИГЕ Ри (ај (ој ај њиг 


Област конвергенције Лапласове трансформације ове пригушене функције је Ке(2) > —а. Када 
угао неограничено расте, «) — со, тада: 

2 а . 

и (о 4 


ИЕ а иљ] 
(ај5 
с) 


ЈАЈ] = 


Она представља и начин пригушивања таласне функције слободне честице квантне механике, из 
чега лако видимо бар две последице. Смањивање вредности амплитуде приближно одговара 
опису опадања потенцијала [44-45.] виртуелних сфера и, при исчезавању, његовим преласком у 
чисто имагинарни домен. 
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49. Фуријеова трансформација 

Фуријеова трансформација је математичка операција разлагања периодичне функције на њене 
„спектралне компоненте“ ради једноставније анализе. Она узима шаблон заснован на времену, 
мери могуће циклусе и враћа укупан „рецепт циклуса“, тј. њихове амплитуде, помаке и брзине 
ротације. Уопште, математичка трансформација је промена перспективе. У том смислу Фуријеова 
трансформација мења нашу перспективу од „потрошача“ до „произвођача“, претварајући „шта 
имам“ у „како је направљен“, за дату смешу она тражи рецепт. 


Са становишта инжењерства, Фуријеова трансформација је „алатка“ за одређивање доминантних 
фреквенција у сигналима вибрација. Када доминантна фреквенција сигнала одговара природној 
фреквенцији структуре, вибрације које се јављају могу се појачати услед резонанце. Ово се може 
догодити до те мере да сруши структуру. 


Дефиниција 1. Дискретна Фуријеова трансформација претвара низ х,, ..., ху датих М комплексних 
бројева у низ М комплексних бројева 


–1 


М 
Хр = 3 др УМ 
п 


=0 
заоск<Мм —1. 
Иначе је за имагинарну јединицу 12 = —1, а остале ознаке су: 

• М— бројузорака, 

• п— редни број текућег узорка, 

• х, — величина сигнала у п-том тренутку, 

• К— текућа фреквенција (од 0 Нх до М — 1 Н2), 

• Ху —— резултат дискретне Фуријеове трансформације (амплитуда и фаза). 


Излаз Ху је комплексан број који кодира амплитуду и фазу синусоидног таласа са фреквенцијом 
К/М циклуса у јединици времена, на основу Ојлерове формуле 


ехр2тикп/М) = соз(2пКкп/М) + #зт(2пКкп/М) 


Израчунавањем Ху проналазе се коефицијенти апроксимације сигнала линеарном комбинацијом 
таквих таласа. Пошто сваки талас има цео број М циклуса током јединице времена, апроксимација 
ће бити периодична са периодом М. 


Дефиниција 2. Инверзна дискретна Фуријеова трансформација враћа низ Х],..., Ху нађених М 
комплексних бројева у низ М оригиналних комплексних бројева 


М—1 
> Хрезтикт/м 


к=0 


=| = 


Ху = 


заОоспе<м —1.И 


Сви таласни облици, без обзира шта пишемо или посматрамо у васиони, заправо су само збир 
једноставних синусоида различитих фреквенција. Отуда могућност да се функције тако масовно и 
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успешно подвргавају Фуријеовој трансформацији. Штавише, представљање скоро сваког облика 
линије графа (трајекторије честице) помоћу произвољних таласних облика сугерише нам да су све 
те линије заправо њени облици, односно да линије и немају истакнуте микро облике. 


Приметимо да својом формом Фуријеова трансформација подсећа на „информацију перцепције“. 
Она је скаларни производ вектора (низова) опажаја субјекта и објекта који дефинишемо са 


п 
а ђ = > акбу 
к=1 


Иста је форма дискретне Фуријеове трансформације из чега произилазе и неке (апстрактне) исте 
изведбе. Међутим, ова се дискретна форма лако преноси у одговарајуће непрекидне облике. 


Дефиниција 3. Непрекидна Фуријеова трансформација функције / (1) је 
+ о 


Ека) = А = | с “тог (у а 


— со 


где је о) = 2пф обично неки угао и | је време. Инверзна Фуријеова трансформација овој је 
+ 00 
ј6) = 5 | ер (оу ао. 
2п 
Функције ЈГ (6) и Е(о)), односно (7), интеграбилне су комплексне величине. Модуо ове друге је 


тзв. спектрална густина амплитуда, а аргумент спектрална густина фаза. 


Постоји неколико нама интересантних теорема Фуријеових трансформација које ћу овде укратко 
прелистати и доказати за континуалне случајеве. 


Теорема 1. (Линеарности) Т(ај + Ба) = ат(]) + БР (9), где су а иђ константе. 


Доказ: 
КО + 00 | 
гај +вајба) = | Гаји + робе“ аг = 
+0о0 и + оо 
200) О(о) =а | ј (је “0: 4Е + а (бје“2т1о: 4 
> жоо жоо 
и ЗУНИ = аР(2) + 50(2) = ат(ј) + 5714). 
! о) 


Дакле, Т(ај + Бајо) = ат[]) + БЕ(д), а то је оно што 
је требало доказати. ш 


Којч 
о(еђ На слици лево видимо да ова, теорема линеарности, има 


примену у проучавању интерференције таласа. 


о 
Фуријеова трансформација садржи исте информације као и оригинална функција, она је додатни 
начин представљања сигнала (у фреквенцијском, а не у временском домену). 
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Теорема 2. (Померања) #76 – х)уј(о)) = е “79 (1), 


Доказ: 


ТО – ој (о) = | ТД = а С засад а4Е = 


= бе“ 2тох | ЈЕ из хје 210!) аЕ = е 2тох | ј (ује“270У ду 


= е“гтех (7) — а" НОЖРСЕ 
Дакле, Р(1(Е — х)ј (о) = е“ 20 21], што је и требало доказати. шт 


Теорема померања говори нам о временски независној 2(1) | 
форми импулсног одзива. Слика десно показује систем 
инваријантан на линеарни помак. Одговор на импулс 
Ћ(Е) — Ћ(Е — 1") померен из тренутка | за [' даје исти 
облик импулсног одзива. 


49.1 Примери ДФТ 
Следе класични примери дискретне Фуријеове трансформације. 


Пример 1. Нека је ху = 1,х, = х, = = ху_1. Тада је: 
М–1 
__ 2пикт, __ 2 тик __2тик2 _2так(М—1) 
ен У. аза М = хрођже М +же МУ +: + хм-1е М =71, 
п=0о 


за свакок = 0,1,2,. ,М—1. О 


Из овог примера, за инверзно 


к=0 


1 
следи х = —' М = 1, док за остале индексе, п = 0, имамо: 
оу 


ке 2 тип. 
1 У (• пе) - 1 у (е Ј ) 1 
– _- ______-- 
њи: 2 пт 
" к=0 мМ 1 


Дискретна Фуријеова трансформација у 1. примеру „шиљак“, из почетног тренутка, рашчлањује на 
збир таласа (овде једнако пондерисаних) који интерферирају, међусобно се поништавајући у свим 
тренуцима осим почетног. То се још боље види када шиљак преместимо у следећи тренутак, као у 


другом примеру. 
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Пример 2. Нека јех, = Јах, = х; = = ху-1 = 0. Тада је: 
М–1 
__ 2 кт, __ 2тк __2т1к2 _2так(М—1) _2тк 
Ху = хе М = хоће М +же М +: + хм-—1е М =е М, 
п=0 


редом за К = 0,1,2,..., М — 1. Ако је, рецимо М = 4, добијамо редом: 


' 2п 2п 
Хр фр РРА = 005 (– ЕУ + 15 (-7) =0–: 
Х, = е 772/4 = соз(—п) + !зп(—п) = —1+1 0 
| Зп Зп 
БН а (-=) + 1511 (– =) =0+: 
2 2 
па је (Ху) = (1,—5,—1,1). Д 


Из 2. примера израчунавамо инверзно, оригинале на основу копија: 


Вл Е; 
-1У. Хке М – - (Хо + Хенан Хрегнна 4 Хдеттина :) 


Р Е А Зл п , 
где фактори 1, =1, ! редом представљају фазне помаке таласа за 7 т, >' Даље је: 


пп Зпт, Зпт, 
--||-( —1 со + ап) — (со пп + 1 5 пп) + (сов=- + (ап 7) | 


Посебно за п = 1 биће: 


а 


хе а – КО +1:1)–(-1+1:0) + 60 – дј= 


Међутим, за све остале (п. = 1) је: 


- + Зпт. те) (5 Злтпо 0. ти)| 
Ху Бил ! | со5 2 с05 2 51 2 51 2 


1 ( Апп | 2тт . 2тт ==) 56 


–2! став. сати 2 етан јата = 


Уопште ће инверзна трансформација дати почетне вредности, што се види из следећег: 


М-1 М—1 /М-1 
1 2 тикт. 1 _ 2 ткт 2 тикп. 
= у Хке М 5 Буе М е Мм = 


к=0 к=0 ~т=о 
М—1 М—1 М-1 
1 2 тикт. 2 тикп. 1 2т1Кк(п—т.) 
ЊЕ (ет пет је уд ме 7 
к=о т=0 кт=0 
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М-—1 М-—1 
али -т) т) 


Ху е = Хау 
т=0 к=о 


с ТЕ 


јер када је п = т унутрашњи збир је 0, а са п = т тај збир је М (8. коментар након 1. примера). 


Када у 2. примеру за М стављамо све већи број, а и даље једино х. = 1 је различито од нуле, онда 
добијамо све више вредности Ху (тачније М таквих), који се могу представљати амплитудама дуж 
реалне и имагинарне (Ве, |т) осе комплексних 
бројева, док се талас премешта дуж К-осе, као 
на слици лево. Што је већи број М, учесталост 
(фреквенција) појављивања ових ротација око 
К-осе већа је, али са увек истим амплитудама 
(отклонима) у правцима реалне и имагинарне 
осе. 


Са становишта (моје) „теорије информације“, 
то има и додатних значења. На пример, када 
узмемо у обзир многостукост простор-времена (Рутепзјоп5), онда су ово ротације наизменично 
кроз реалност текућег посматрача и његовуу псеудо-реалност, аналогно познатој појави кружне 


поларизације. 


У електродинамици, кружна поларизација (Стгешаг ројапга оп) електромагнетног таласа је стање 
поларизације у којем, у свакој тачки, електромагнетно поље таласа има константну величину док 
се ротира константном брзином у равни која је управна на правац таласа. 


49.2. Конволуција 

Конволуција је израз који нам говори о начину обликовања једне функције (низа) другом, односно 
она је интеграл (збир) који изражава преклапање једне функције другом. Ту „мешавину“ функција 
ј и д у случају непрекидности прецизно пишемо: 


+ со 


РЈ + о) = | ан 


Сменом променљиве у = «о — Е следи еквивалентан запис, а отуда комутативност ј + а = 4 + Ј. Из 
двоструких интеграла приказаних итерацијама налазимо Ј » (а хћ) = (Ј # 3)  ћ, асоцијативност, 
а из линеарности ингеграла и дистрибутивност Ј » (а +>" ћ) = (/ + 43) + (] #71). 


У дискретном случају конволуције, ради лакшег разумевања, прво посматрајмо два полинома: 
ТО) = ар + ах, 9(Х) = бо + Вах + 5Х2 


претпостављајући да су сви коефицијенти који овде нису написани једнаки нули, а, = аза = = 0 
ибђз = ђ, = = 0. Производ ових полинома је: 


То0а 0) = аб) + (аоћу + аађојх + (аобљ + аабћу + аобћо), 


јаја а) = (а #Б), + (а жБ)х + (а » Вјик 
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где су 
К 


(ажђ), = > ајђк- у 


јео 


дискретне конволуције. Следећа, теорема конволуције за дискретну Фуријеову трансформацију 
тврди да у временском домену конволуција одговара множењу по тачкама у фреквенцијском 
домену, да 


(ахћ)ео б-Н 


где су десно Фуријеове трансформације функција лево. Фуријеова трансформација конволуције је 
производ две Фуријеове трансформације! Доказ је једноставан и као што се види у наставку доћи 
ће кроз замену редоследа сабирања из конволуције и дискретне временске трансформације. 


Теорема 3. (Конволуције) ЕТ (а х ћ) = (9) ТК). 


Доказ: 


+ 00 + со + оо 
(да ћКо) = |з (а Х Тре к = > > ба а = 


Кк=— со Кк=— со т=— оо 
+о0 +о0 +о0 +о0 
= > па % мане = |4 па 4 ња) 
Кк=— «со т==— оо Кк=— со т==— со 
+ со 
= ~ ако )но) = с(оЈН (о). 
Кк=— о 


На крају је кориштена 2. теорема (померања). Дакле, Т(а Х 11 (2) = Е(9]) ' ТЕ]. т 


Конволуцију а (1) и П(Е) кратко означавамо са ад  ћ. У применама ове функције често имају сасвим 
различита значења. Једна као типични сигнал или ток података који траје у недоглед у времену, а 
друга је функција одговора, обично вршна, поентирана одакле на обе стране пада на нулу. 


49.3. Непрекидност 

Теорема сличности је у основи ограничена на случај непрекидног времена. Каже да „развлачење“ 
сигнала за фактор а у временском домену чини „стискање“ његове Фуријеове трансформације за 
исти фактор у фреквенцијском домену. Ово је веома фундаменталан Фуријеов однос. 


Теорема 4. (Сличности) 7 (/ (а )ј (о) = ај (2). 


Ја 


Доказ: Тј (аг)) = ј-_ Кеавђе“ а ад; = 
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+ 00 


0) 
|| Р(ађе ак да, а> 0 


Е=— 00 


.0) 
| РО јаје 25140 |ајае, а<0 


Т=— со 


.0) 
| Које 7"ау фу, а>о 
5: 1 0) 
_ у=-оо ИН У 
– Ар = Е( ). 


1 – ту 
Та] јОоје "а" ау, а<0 
у=—0о 


Тиме је тврђење доказано. Ш 


Следећа је „Рејлејева теорема“ о енергији. Она каже да је интеграл квадрата величине функције 
(тј. енергија функције) једнак интегралу квадрата величине њене Фуријеове трансформације. 


Теорема 5. (Рејлијева) (2 ТРОЈЕ ае= МАЈЕ до. 


Доказ: 


| гора = | о ра: = 


- | | | Е(2)е77 0 до | ј(ба: = ] |] Е'(оје “7706 до | 7 (1) аЕ 


+ 00 


= | ној | | а“ ОР Реј | дај = | г'ск(ојао = | ер ао, 


«)=— 00 == 00 2=—00 


Дакле, | "||га = МААСУЈЕ до), што је и требало доказати. Ш 


Рејлејева теорема о енергији зове се и Парсевалова теорема за енергетске сигнале. Она вели да је 
снага сигнала једнака збиру квадрата величина различитих хармонијских компоненти присутних у 
(дискретном) спектру. Та нам, 5. теорема, говори да снагу сигнала одређују његови коефицијенати 
Фуријеовог реда, или другим речима, хармоници присутни у сигналу. 


Следеће је својство Фуријеове трансформације да извод у временском домену дате функције види 
као множење Фуријеове трансформације те функције фактором 271 у фреквенцијском домену. 


Теорема 6. (Диференцијације) #([' (0) (о») = 202 (о)). 


Доказ: 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


јај= Р"ЦЕј= | "боје ог а 
7 (0 = | 2т10 (оје 279 до 


Ј|' = Р" Чгтов (о)) 
ТЈ) = гтоВ (0)) 
а то је и требало доказати. ш 


Знамо да непрекидну Фуријеову трансформација (3. дефиниција) можемо разумети као прелазак 
са временског [ на фреквенцијски домен с), при чему копија не губи информације оригинала. Уз то 
приметимо да множење комплексном јединицом е""" временских вредности Ј (6) врши смицање, 
ротацију ових вредности у имагинарној равни које тек добија „физички смисао“, тачније смисао у 
(мојој) „теорији информације“ (Тће ч'х фитепзјоп5 ог грасе-Ште). Теорема диференцијације томе 
придодаје (до даљњег рецимо квази) кинетичку енергију (Апешаг Кгедџепсу). 


Друга перспектива коју нам ове трансформације отварају су фреквенције. Оне су на (засад псеудо) 
начин присутне и на рецимо трајекторијама где их иначе не виђамо (Егедџепсу). Трећи концепт су 
канали преноса, које представљају овакве трансформације. 
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50. Мелинова трансформација 

за разлику од Фуријеових и Лапласових трансформација које су уведене за решавање физичких 
проблема, Мелинова трансформација је настала у математичком контексту. Роберт Мелин био је 
фински математичар који је студирао код Карла Вајерштраса. 


Дефиниција 1. Нека је ] (:) функција дефинисана на позитивној реалној оси, 0 < 1 < оо. Мелинова 
трансформација М је пресликавање функције ] у функцију Е дефинисано у комплексној равни 
релацијом 


м“б6) = 26) = | Роде а 
[0] 


Функција Р (5) је Мелинова трансформација функције Ј (5). Обрнуто, када је дато Р (5), онда је 
С+1о0 


1 
мече === | 2 "К(к): 45 


Инверзна Мелинова трасформација. 


Ознака другог интеграла имплицира да је он линијски интеграл узет преко вертикалне линије у 
комплексној равни, чији прави део с треба да задовољи само благу доњу границу. Услови под 
којима ова инверзија важи дати су у Мелиновој теореми о инверзији. 


Основни, горњи интеграл након смене варијабле ! = е “7, одакле а; = –е Хахиј(е“"“) = д(Х) 
постаје двострана Лапласова трансформација 


со 


140) = | обде “>> 4х 


— со 


што пишемо 


МАТО; 5) = 24] (277); 5). 


Да би добили Фуријеову трансформацију, у ову смену ставимо 5 = а + 218 
Е(5) = | Се по 27 


Резултат је 


МИЈО; а + та) = Тј (е“Хје“ 7; 1 


Иначе је Фуријеова трансформација 


је) = | годет чек ах, 
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Дакле, за дату вредност Ее(5) = а која припада траци дефиниције, Мелинова трансформација 
функције се може изразити и као Фуријеова трансформација. Оно на шта из овога треба обратити 
пажњу јесу пресликавања амплитуде, тада вероватноће Лапласове и Фуријеове трансформације у 
информацију Мелинове. 


Наиме, горњи преписи Мелинове у двострану Лапласову трансформацију су: 
МТ) = МИС Повх) 5), МАЈ5) = Де“) 5); 
а када се у ове преписе укључе и Фуријеове трансформације: 


ЊЕ ЈИ) = ЈА] 5) = МЕЈ (— Поб х))(—:5) 
МА) = је 5) = Ре“ 7) :5) 


а то је само још једно од већ постојећих многобројних тумачења ових једнакости. 


Међутим, аутентнични примери Мелинове трансформације многобројни су и неизбежни у њеној 
каснијој допуни кроз „теорију информације“. 

Пример 1. (Саћеп–Ме  !пгевга!) Мелинова трансформација функције Ј (Х) = е“% је гама 
функција Г(5) = Ј х5“Те“7Х ах. Она је дефинисана за све комплексне бројеве, а Г(т) = п! дакле 
факторијел (1! = 1: 2: 3 · ---· п) за позитивне целе бројеве. [0 


со . 
Пример 2. (Полином) За позитивне експоненте (/ > 0) интеграл | ха ах није конвергентан, али 
се пригодна функција може дефинисати са 


_ (х%, х<1 
год = 5 х>1 


па су њене Мелинове трансформације: 


1 

|| 

МАРСОВ) = 49, 
| 


Проверите! [] 
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51. Интегралне трансформације 

Интегрална трансформација је пресликавање који производи нову функцију а (у) интеграцијом 
производа кернел функције Е (х, у) и постојеће функције ; (х) у датим границама. Процес назван 
трансформацијом дат је једначином 


ђ 


9(у) = | ко, у 00 ах 


а 


Неке од тих трансформација поменуте су у недавним насловима. Једна је Лапласова са кернелом 
е“%У џ границама интеграције од нуле до плус бесконачно, друга Фуријеова кернела е“ У сл са 
границом од минус до плус бесконачно, а трећа Мелинова која их поопштава. 


Са становишта преноса информација интегралне трансформације се могу једнако посматрати на 
неколико битно различитих начина. Један је овде наглашаван [43. Условне вероватноћеј, где смо 
кернел третирали као условну вероватноћу К (Х, у) = т(ујх), а постојећу функцију попут густине 
вероватноће Ј (х) = р(х). У наставку идемо том интерпретацијом интегралних трансформација, 
као канала у ужем смислу, али приметићемо да тако дефинисан канал има једну непрецизност и 
одмах ћемо је расправити. Са променом улаза мења се дефиниција канала, а ми даље раздвајамо 
ту улазну информацију од канала у ужем смислу. 


Укратко, вероватноћа да у падне у интервал (у, у + ду) ако је х сигурно било (х, х + ах) износи 
т(ујх)ау. Условна расподела т (ујх) не зависи од улазне расподеле х, па згодно дефинише канал, 
преносх — у, односно канал у ужем смислу. Ако је р(х)ах вероватноћа да х буде у (х,х + ах) то 
је т(ујх)р (х)ахау вероватноћа да у буде у интервалу (у, у + ду). Према томе 


ф(уЈаду = т(ујх)р(х)ахау 
односно 


+ со 


6) = | "буђдрбд) 4х 


— со 


за произвољно у. Тако одређујемо густину излаза (ф) из канала (т) кроз који шаљемо произвољну 
расподелу (р) улазних сигнала. 


За разлику од претходне дефиниције, канала у ширем смислу [43.], сада исти канал дефинишемо у 
ужем смислу и то аналогно третирању дискретних канала. Препознајемо Фредхолмову интегралну 
једначину прве врсте, ознаке К (Х, у) = т(у|х), где је 

+ о 

| Кк(ху)ау=1, К(ху)2=0. 
Ако је произвољна функција Е (х, у) интеграбилна по оба аргумента (х и у) и нормирана по другом 
аргументу (у), тада она може дефинисати канал у ужем смислу. Због услова нормираности улазне 
расподеле (р) видимо да је функција ф, ако постоји, такође нормирана. 
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Пример 1. Када је канал дефинисан функцијом која не зависи од друге променљиве, на излазу је 
константна расподела, она не реагује на промене вредности улазне расподеле. 


Наиме, ако је К(х, у) = [ (%) > 0 за све х Е (а,Б) и К(Х, у) = 0 за све остале х « (а,ђ), чак и ако ЈГ 
није нормирано на јединицу, добијамо излазну расподелу: 


+оо ђ 
обд = | когудрбдах = | годрбдах = сопа, 


дакле константу за сваку улазну расподелу р. Вредност константе одређује нормираност функција 
р и ф. Добијамо униформну расподелу на интервалу (а, ђ) ако је улазна расподела ненегативна на 
истом интервалу. [0] 


Пример 2. Када је канал дефинисан функцијом која не зависи од прве променљиве, на излазу је 
расподела самог канала, без обзира на улазну расподелу. 


Наиме, ако је К(х, у) = Ј (у), за произвољну улазну густину р, због њене нормираности, добијамо 
излазну расподелу ф(у) = [ (у). О) 


У оба примера имамо бескорисне канале (црне кутије), јер на основу примљеног излаза не да се 
одредити карактер улазних података. Први од примера, парафразирам, каже да без „апарата“ за 
пренос информације нема информације, а други да без неког таквог нема нити дезинформације. 
Специјални случај претходних је канал К(Х, у) = сопзћ, а који производи униформну расподелу на 
некој области Оху равни. 


Кернел К(Хх, у) дефинише линеарни оператор К : р — ф који скуп улазних расподела пресликава у 
скуп излазних расподела. Наиме: 


+ оо 


К(ара + Брг) = | кб, ујГара (2) + рад] ах = 


— со 


а | Куд раб ах + 5 | К(а, У) ра (о) ах = аКбра) + БК(р2ј. 


То је општа особина која, наравно, важи и за Лапласову [48.] или Фуријеову [49.] трансформацију. 
На пример, када је канал у ужем смислу дефинисан експоненцијалном расподелом 
К(х, у) = хе“ У 


са позитивним варијаблама (х, у > 0), тада се К може свести на 
Мркој = ве) = | геде“" а: 
0 


дакле на Лапласов оператор (трансформацију). 


Пример 3. Када је улазна расподела Ерлангова (Ах > Осат = 0,1,2,...) 
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А(Аху" 
Рт (2) = 0 “та 


полазећи од познате (табличне) једнакости за Лапласов оператор 


добијамо излазну расподелу 


1 
Фа (у) = (у + 232 


сау > 0.0 


Посебно, за т = 0, улазна Ерлангова расподела своди се на експоненцијалну [40.], а излазна 
постаје Кошијева расподела 


А 
Ф(у) = (у + 42 
са у > 0. Лако је проверити да је Кошијева расподела дивергентна, тј. нема коначне моменте 
(очекивање, дисперзију, итд.), па према [41. Теорема 1.] не мора имати коначну информацију 
континуума. 


Познато је да време услуживања клијената, време услуге купца, време поправке аутомобила, 
време разговора телефоном — има експоненцијалну или Ерлангову расподелу. Канал у ужем 
смислу са експоненцијалном расподелом се, према томе, имитира трговца чије је појединачно 
време услуживања у, а просечно време услуге 1/х. Излазна расподела је средња вредност (р) 
функције канала у ужем смислу. 


Канал са нормалном (Гаусовом) расподелом 
1 (х-у)г 
е 202 
ом2п 


са х, у е К, има нешто другачије интерпретације. То је расподела која добро описује грешке 
мерења или гађања. Ако меримо величину чија је тачна вредност х, а средња грешка мерног 
уређаја износи с, онда вероватноћа да ће бити измерен број у интервалу (у, у + фу) износи 
Кк(х, ујах. 


Ку) = 


Сам канал К, који год, садржи или производи неодређеност чија је средња вредност 
+ оо 


КК) = – | Кк(х, у) [ов К(х, у) ду, 


— со 


а када је канал нормалне расподеле имамо [36. Расипањеј] његову информацију 


5(К) = 1огам2ле 
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заправо једнаку шуму који он производи. То је и резултат једнак [40. Пример 1.], а може се добити 
на још један начин. 


Наиме, средња вредност неодређености канала по улазној расподели [43.] је шум: 
+00 


5(Х, У) = 5(71Х) = | 25 ах = 5(К) 


— со 


где се подразумева непрекидни канал, па нема потребе да користимо ознаку 5“ као пре. Овде је 
5(К) константа, а р је нормирано. Шум нормалног канала не зависи од улазне расподеле. 


Затим, произвољна излазна расподела, варијансе 227 према [41. Теорема 1.] има информацију 
5(7) < 1ороум2ле 
а са друге стране, она је једнака збиру средње узајамне информације и шума, те је 


бу 
О < 5(К,У) < [ов — 


Добијене релације важе за сваку улазну и излазну расподелу кроз нормални канал, а последња 
(десна) неједнакост постаје једнакост ако је излазна расподела нормална. Посебно отуда видимо 
да је б6у/а > 1 те је за нормалну излазну расподелу 


5(К) < 5(7). 


Интуитивно очекујемо такође да ће неодређеност, па тиме и њихова реализација у информацију 
бити већа када се на основну иноформацију дода шум канала, а ови детаљи са формулама ту су да 
укажу на склад теорије. 


Да бисмо упоредили улазну и излазну информацију подсетимо се да је за нормалне расподеле 


ка 1 _(-уј5 _(и-2) 
| колу ођкаљођау = | « 21 2 292 ду=--— К(х, –2; 02 + 02) 
0102п 


За то постоје разни докази. Дакле, серијски спој нормалних канала је нормални канал, па ако је у 
таквом каналу улазна расподела нормална, такође је и излазна нормална. Прецизније, приметимо 
из ду = 62 + 0, излазна варијанса (дисперзија) збир је улазне и варијансе самог канала, из чега 
произилази поредак информација 


5(Х) < 507), 
што је још једна потврда претходно реченог. 


Контрапримером се може показати да последње неједнакости не важе за не-нормалне улазне 
расподеле у нормални канал. Ако је улазна расподела униформна на датом интервалу, тада 
излазна расподела није униформна, јер би то противречило [41. Теорема 1.]. 
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М Део: Композиције 
Питања попут следећа два инспирација су ми да тему „сила неодређености“ разрађујем на начине 
наставка текста, који са претходним открићем такође добијају дах новине. 


Питање: Могућности су више од простих опција – кажете, можете ли ми то појаснити> 


Одговор: Могућности нису „само“ опције, оне су и (конструктивна или деструктивна) снага „силе 
неизвесности“. Отуда слободе које имамо (као и живих бића уопште) оснажују нас да пркосимо 
спонтаности, иначе мртвих тела да се препуштају „као кладић низ воду“. Слободе су заиста 
потенцијал народа (живог света) налик оном гравитационе, или Кулонове силе. 


У прилогу (Опсегтајтђу Еогсе) су докази. Прво, наводне силе неизвесности опонашају Кеплеров 
други закон (потег сунце-планета у једнаким временима пребрише једнаке површине). Друго, у 
свом „простору вероватноћа“ оне узрокују кретања по коникама (хиперболе, параболе, елипсе, 
укључујући кружнице и праве линије – као у физичком свету сила). Треће, дејство неизвесности 
шири се брзином светлости и опада са квадратом удаљености. 


Интуитивно, то исто видимо из „спонтаног“ чешћег дешавања вероватнијих исхода. Пишем 
наводног, јер овим открићем она (спонтаност) постаје врста силе, а само откриће „чудно“ и 
„одбојно“, бар на први поглед, као и својевремено откриће гравитације. Са овим добија се на 
значају и смислу бјективности самих опција, некаузалности овог света, а тиме и на „паралелним 
реалностима“. 


Питање: О каквој „брзини светлости“ ширења дејства „силе неизвесности“ говорите у апстрактном 
„простору вероватноћа“; зар светлост и брзина нису појмови физичке реалности 2 


Одговор: Прочитајте пажљиво те прилоге. Апстракција је рецимо „виртуелна сфера“ [38.]. Ма којег 
полупречника, она дели „простор вероватноћа“ на веће унутар и мање вани вероватноће, 
математички је појам, статичан, али је у (произвољној датој) примени везана за посматрача. Као 
објекат без сопственог времена (попут светлости), она путује брзином садашњости самог субјекта, 
посматрача. А та је брзина светлости. 


Брзином светлости садашњост, ма ког посматрача из физичке реалности, путује из прошлости ка 
будућности. Доследно, појаве које описујемо теоријом вероватноће, а можемо их посматрати, 
шире своја дејства брзином светлости. 
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52. Дифузија 

Познати ставови о збиру нормалних расподела случајних варијабли поучни су на разне начине. 
Једноставан случај (и = О ис = 1) нормалне, тзв. Гаусове, расподеле дефинише густина 

х2 

= 

(х) === 

“ М2п 


чији граф је приказан на слици десно. 


Посебно за ову дистрибуцију, вредности мање 
од једне дисперзије (а), тачније речено њене 
стандардне девијације, од средње вредности 
(и), чине 68,27% укупних могућности. Док две 
стандардне девијације од средње вредности чине 95,45% читавог скупа, а три чине 99,73%. 


Премештањем (транслацијом) дуж хоризонталне, х-осе, или развлачењем/скупљањем графа, које 
постижемо сменом х — (х — џи)/а, поменути односи дисперзије и очекивања (а и џ) не мењају се. 
Тада густина нормалне расподеле постаје 


_Се-и)г 
е 202 


хиоО) = = 
рОоши, о) о 


расподеле Ми, 6) случајних варијабли Х за математичким очекивањем и и девијацијом с. Она је 
симетрична око вертикалне осе х = џ. 


Када имамо две случајне варијабле, Х; и Х,, свака своје нормалне расподеле, редом Ми, 02) и 
Ми, У), њихов збир је опет случајна варијабла 2 = Х, + Х, нове и такође нормалне расподеле 
Ми + из,02 + 02). Нема потребе да доказе преписујем овде, али поменућу да се статистика са 
хи-квадрат расподелама заснивају на овом ставу. 


Основна хи-квадрат расподела се добија као збир квадрата М независних Гаусових (нормалних) 
случајних променљивих са нултом средњом вредношћу, а генерализације хи-квадрат расподеле 
се изводе као и код Гаусове 


Џ 


ко = ов 


сабирањем квадрата других типова одговарајућих случајних променљивих. 
Приметимо још једну занимљивост Гаусове расподеле, да се исти став о повећању очекивања и 
дисперзије може доказивати помоћу конволуција 


+ оо 


вије | ру(2 – х)ра (2) 4. 


— со 


Те нормалне густине р, и р; својом „композицијом“ (збиром) дају густину 27 конволуције, опет 
нормалне расподеле Ми + џи, 02 + 02). Занимљивост је у запису конволуције и израчунавању, 
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који изгледају као да радимо са множењем нормалних расподела, стварном композицијом 
функција њихових густина. 


Производ две Гаусове (нормалне) случајне променљиве има дистрибуцију линеарне комбинације 
две хи-квадрат случајне променљиве 


1 1 
ХХ; = П О + Х;): — 13 – Х,)7. 


Ту су Ху, Хо, Х, + Ху и Х, — Х, нормалне променљиве, али њихови квадрати имају хи-квадрат 
расподелу. Та „скоро сличност“ дисперзије Х-квадрат расподеле и дисперзије Гаусове расподеле 
долази од саме опште дефиниције дисперзије [26.], варијансе 7 2(Х) = Маг(Х), која је средња 
вредност (очекивање) квадрата одступања од средње вредности џи саме расподеле. У дискретном 
случају 


Маг(Х) = > ри (Се — и): 
к=1 


где је р; = Рг(Х = ху) вероватноћа да ће К-та променљива бити реализована. 


Разлика између хи-квадрат расподеле и варијансе подсећа на разлику између коваријансе и 
корелације. Додајмо овоме да се та „скоро сличност“ може приметити за неке динамичке процесе 
„теорије информације“, попут овде разматраних виртуелних сфера [38.]. Надовезивањем Гаусових 
расподела расте дисперзија резултирајуће расподеле и „композиција“ постаје „канал преноса“ са 
шумом који је једнак прираштају информације. 


Таква врста канала преноса разликује се на пример од Марковљевих ланаца чији прираштај ланца 
је константан, по већој слободи начина појаве шума. Зато их је могуће применити на јединичну 
површину растуће „виртуелне сфере“, којој амплитуде опадају а са њима и вероватноће размене 
информације са евентуалним другим набојем, што би био процес не-константног ланца Маркова. 
Велике су могућности развоја теорије у том правцу и о томе ћу касније детаљније. 
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53. Дисперзија фигуре 

Посматрамо виртуелну сферу у ширењу, или било коју сличну границу све мањих шанси неког 
простора вероватноћа. Рећи да се густина вероватноће на њој „разблажује“ формално је једнако 
наизглед сасвим супротном, посматрању „ницања нових могућности“ у датом делу површине. 
Нешто слично заиста се и дешава са вакуумом из којег ће искакати догађаји када га посматрамо 
све детаљније, али не морате се везати за ту физичку слику, за сада радимо апстрактно. 


Знамо да се површина фигуре: повећава са квадратом њене дужине. То можемо визуелизовати са 
одређеним константним бројем равномерних детаља, рецимо тачака, неке растуће површине која 
је сразмерна квадрату удаљености датог пара тачака. У складу са тиме, дисперзија с растућег дела 
сфере расте са њеним полупречником 7. 


У случају промене дисперзије сличне Гаусовој [40. Пример 1], информација је 
5(б) = (ом пе) 
а њена промена по јединици промене полупречника, њен извод по т, износи: 


а5 _ М2пе ао _ М2пе 


а" с ат  "т 


Информација дела сфере опада попут потенцијала. 


То је хомотетија, врста пропорционалног пресликавања. Исти резултат, о информацији која опада 
на начин потенцијала, можемо добијати у случајевима „сличних фигура“, на пример када пренос 
информације каналом има константан шум у односу на делове тока, као у Марковљевим ланцима. 
Информација коју такав канал преноси опада са бројем „карика ланца“. 


Условљеност следеће теореме „погрешном“ расподелом, због чега се повећава информација кроз 
канал [14. Примери 1-3], односно настаје шум (сметња) преноса, показује да губици информације 
каналом преноса долазе од „неусклађености“ коју сам канал [08. Адаптација каналом] покушава 
„поправити“. 


~ 


НЕ [а |, В = [Б; | ис = [с реда п такве да је АВ = С," = дВ, а = РА. Тада за информације 
важи 5(т[р) > 5(7|4), где једнакост вреди ако и само ако је ђ), = с; за свако ј = 1,...,п.. 


Теорема 1. Дате су три расподеле р = (р1, ...,рл),9 = (41, --- Фа) ИТ = (1, ...,Ћ,) са три матрице 


Доказ: Из с; = ЊУ аубуј и коваријантних множења, за !-ту врсту информације матрице С је: 


п п п п п 
5, (АВ) = У ај јовсу = У > атуовсу = У а У бу ровсу = 
ј=1 је1!=1 1=1 ј=1 
п п п 
=> – У ап У ћуовђу = У апз(В) 
1=] јел [=] 


9 фигура је у геометрији било какав непразан скуп тачака. 
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Неједнакост долази из „погрешне расподеле“ [14.], због чега неједнакост постаје једнакост ако и 
само ако б;; = с; за свако ј = 1,...,п. То ће бити нпр. када је В и С састављена од једног истог 
коефицијента, тј. када су врсте матрице В једнаке. 


Даље, множећи са р; добијамо: 


п п п п 
У рз(АВ) = У У разз(В) = У аз(В) 
!=1 !=1 


!=1:=1 
тј. (7 |р) = 5(7|4), што је требало доказати. ш 


У аналогијама са површинама, рећи ћемо да растом површине канал оригиналну информацију 
настоји „разблажити“, односно у другом случају да у каналу шум настаје „ницањем нових порука“. 
Апстрактност разматрања дозвољава овакве излете, из једних у друге области математике, јер 
свака тачна теорија у складу је са сваком другом тачном теоријом. 


Занимљив модел таквог канала је васиона у интерпретацији моје теорије информације. Докле 
сеже могућност опажања прошлости, универзум је канал преноса информације. Сметње (шум) 
настају процесима успут, током протеклих 13,7 милијарди година. Физикална интерпретација 
овога, моје (хипојтезе одавно, је да се супстанца „топи“ у простор, чиме се ентропија супстанце 
повећава а њена укупна информација смањује на уштрб физичког простора. 


Подсећам, закон одржања за информацију при томе важи, као и материје у случају хабања било 
каквог физичког канала преноса порука, али не важе закони ентропије (други термодинамике) за 
простор као за супстанцу. 


Пренос информација каналом дешава се и очитавањем резултата експеримената током процеса 
мерења. Слично настаје током сваког разговора док наша информација иде ка саговорнику, или 
обрнуто. Надам се да ово више није спорно, обзиром на 1. теорему, да сметње дате информације 
настају вишковима који се придружују успут, заједно са изобличењима послате због удруживања 
са околином. Другим речима, ако би се ток информације потпуно изоловао од средине којом тече, 
онда шума не би било. Информација не може тек тако у ништа нестајати, или из ничега настајати. 


У реалним ситуацијама увек постоје сметње, па макар то била ретка насумична искакања честица 
из вакуума. Оне не морају „трајати“ да би могле дату информацију мењати (трајање је већ и само 
њихово присуство у променама). Са друге стране, закон одржања није нарушен ако упаде и мене 
гледамо у довољно широј околини. 
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54. Стационарни канал 

У науци, рачунарству и инжењерству, црна кутија је систем улаза, излаза, или је карактеристика 
преноса, без икаквог знања о унутрашњем раду. Његова имплементација је „непрозирна“ (црна). 
Црна кутија овде је канал који не преноси информацију уопште. Стационаран канал био би онај 
који на излазу не повећава нити смањује улазну информацију. 


Према претходном ставу [53. Теорема 1], такав је канал С = АВ ако Ву = Ст за сваку К-ту колону 
матрица В и С, и сваки ј-ти редак матрице В. То је следећа ситуација 


Ххд Х; '" Ху, 
са Ре х х ... Ху 
= Се 75. 

Хр Хр 77 Хп 


где је Х = (х1,Х, ..., Ху) нека (произвољне) расподела. За такве матрице важи С2 = С- С = Си 
тада кажемо да је матрица идепотентна. За ове, множењем проверавамо: 


Исто детаљније: 


041 64; 77 Шп Хр Х; 7" Хп 
56 = (ар, Ра) 421 022. | Фот Ху (И Ху 
Фул | Фу; 7 тл Хр Х; 7" Хп 
Х, Хп, 
= (оф 7 фл 7 7 јаба ж о о ж)е% 
х Х, 77 Хи 


јер матрица једнаких редова, коваријантно множена, не мења вредност вектора. Наиме: 


Хо = 2 и) кр= ај 


=1 


јер је збир у другој загради један. Нема ништа од улазне информације р на излазу, јер је х било 
шта. Таква композиција, канал је црна кутија. 


Разматрајући непрекидна пресликавања [42. Пренос варијаблеј, у 1. примеру, видели смо да је 
црна кутија и канал представљен густином који се може исказати производом две 1-дим густине, 
а(љу) = Ко) · Љу). У њему следећем наслову [43. Условне вероватноће, препознали смо црну 
кутију у случају нултог коефицијента корелације, када је условна густина вероватноће била увек 
једнака завршној, независно од претходне. Те одреднице и ове у складу су, црна кутија је канал 
коме излаз не зависи од улаза. 


Расправљајући о условним вероватноћама [43.], у недостатку јединствених ознака, користили смо 
израз „узајамна информација“, наспрам информације појединачне расподеле која је „својствена 
информација“. Тако првом описашмо процесе сликовито приказане изразима: 


Растко Вуковић | ма | 


ИНФОРМАТИЧКА ТЕОРИЈА |! 


5(р = 4) = 5(4 > р) = 5(р,0). 


Узајамна овде такође је блиска „корелацији“ теорије вероватноће. То је износ „информације“ који 
улаз достави излазу, или обрнуто речено, коју излаз прими од улаза. Са том, релације: 


5 > 4) + 5 (а 2) = 5(4) 
5(д > р) + 514) = 5(р) 


казују нам више о обиму својствене информације од р која је прошла из улаза до излаза канала. 
Сву осталу неодређеност, осим својствене почетне, која стиже као 4, називамо шумом. 


Према томе, када имамо црну кутију, биће 5(а|р) = 5(0), а онда из реченог 5(р,3) = 0. Преноса 
порука између улаза и излаза (њихове комуникације) уопште нема. Таква је максимална сметња 
(чисти шум). Глувонеми канал (процес) представља матрица од једнаких колона (врста). Већ је то 
раније расправљено а овде углавном понављам. 


Пре изношења следеће теореме, поновимом да хомоген ланац чини производ (композиција) 
једне те исте матрице, да је ланац Марковљев ако без обзира на то како је процес дошао у своје 
садашње стање он даје фиксна будућа стања (као код бацања новчића када следећи исход не 
зависи од претходних). Треће, матрица је потпуно стационарна ако се састоји од једнаких врста. 


Став 1. Хомогени Марковљев ланац је потпуно стационаран ако и само ако је генерисан црном 
кутијом. 


Доказ: Ако је за сваку расподелу р почетног корака М, ланца д = РММ ... М, имамо константну 
резултирајућу 4, тада је 5(а [р) = 5(д), тј. 5(р,3) = 0, па је канал црна кутија и матрица М се 
састоји од истих колона. Обрнуто, ланац генерисан таквом матрицом је сасвим стационаран. ш 


Када не бисмо знали како би изгледао ланац за различите почетне расподеле, онда ова теорема 
не вреди. Можемо бити сигурни једино да је стационарни низ д генерисан непознатом матрицом 
којој је он својствени вектор. Специјално је јединичној матрици својствени сваки вектор, па имамо 
другу крајност. Бела кутија генерише Марковљев ланац чији сваки корак има расподелу једнаку 
(произвољној) почетној. 


У временским процесима, црна кутија је потпуно насумичан ток догађаја, када прошлост ни мало 
не одређује будућност, без памћења и без могућности предвиђања. Бела кутија је друга крајност, 
крајње детерминисаног тока догађаја. Сви остали процеси између су, имају бар мало случајности 
и бар мало извесности. 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


55. Коваријанса 

Теореме нам могу много рећи, ако их знамо читати. Она из наслова „53. Дисперзије фигуре“ тако 
нам поручује да сметње у преносу поруке каналом не настају мањком него вишком информације. 
Вишком настаје мањак, жешћи потисну блаже. Шум је производ додат оригиналној информацији, 
осим код црне и беле кутије. Прва има максималну „дезинформацију“, а друга минималну. 


Наравно да изражавање о „нестајању“ информације можемо користити и даље, али метафорички, 
као и појам „неистине“, или „празнине“ (вакуума). Такође, иста теорема са током доказа каже нам 
да квалитет преноса каналом зависи од адаптације канала на оно што се њиме преноси. Проста и 
прихватљива порука, коју иначе разумемо и без таквих теорема. Њена тачност или усклађеност са 
„очигледним“, међутим, има својих ограничења. 


На пример, чињеница да и сам канал генерише неку информацију, означену са 5(р,д) у следећем 
наслову [54.], а коју не успевамо представити Шеноновом формулом и коефицијенатима матрице 
канала, говори о некој слабости. Претпостављам да се опис стварности ту показује као недовољан 
исечак извађен из контекста нечега чиме бисмо се даље радије бавили. 


Тачна теорија неће бити у контрадикцији са било којом другом тачном теоријом, па сам ово место 
својевремено! разрешавао помоћу скаларног производа вектора одговарајућих опажаја субјекта 
и објекта, 5 = аб, + аоб, + :· + даћу, Коју сам назвао „информацијом перцепције“. То је испало 
добро, сматрам, јер поменута „узајамна информација“ улазне и излазне поруке канала, пре личи 


на њу, на коваријансу или корелацију, него на Шенонову форму. 


Коваријанса у теорији вероватноће и статистици представља меру јачине везе између промена 
две случајне променљиве, Х и У. Нека су очекивања (Ехрестед маџе) ових средњих вредности, 
редом Е(Х) = их и Е(У) = џу, онда је њихова коваријанса 


Соу(Х, У) = ЕГ(Х – шо( – иу)]. 


У дискретном случају, за скуп од п = 2,3,4, ... тачака података променљивих х и у, коваријанса се 
мери узимањем разлика између сваке од променљивих и њене средње вредности, које се затим 
множе у одговарајућим паровима и производи тих парова саберу а укупни збир подели са п — 1. 
Сажето 


Са – по (ул – бу) + Со – и (уг – пу) + + (ха – по (ул – Ну) 


Соч(Х%,У)= –– 


Пример 1. Аналитичар компаније има податаке за пет квартала који показују раст бруто домаћег 
производа у процентима (Х) и раст нове линије производа компаније у процентима (У): 


х==2, у = 10; 
Ху =53, у; =14; 
ха ==, уз = 13; 
ха =+4, у, = 15; 
Хе =5, уг = 16. 


Чл ~ Обе 


10 Р, Вуковић: „Информација Перцепције“, Економски институт Бања Лука, 2016. 
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Очекивања (Ехрестан оп5) су средње вредности: 


+; +: +х, 2+3+2+4+5 16 


ЕС =иџи, = | ос 32 
у; вео + 10 + 14 + 13 + 15 + 16 
СЕ ЕУ 


па је коваријанса података: 
(–1,2)(–3,6) + (–0,2)(0,4) + (–1,2)(–0,6) + (0,8)(1,4) + (1,824) _ 
5—1 – 
_ (4,32) + (0,08) + (0,48) + (0,72) + (4,32) _ 9,76 


= = 2,44 
4 4 


Сом(Х, У“) = 


Пошто је овде израчунао позитивну коваријансу, аналитичар може рећи да раст нове линије 
производа компаније има позитиван однос са кварталним растом БДП-а. 0 


Оба низа случајних променљивих х = (Х,,Х, ...,Ху) и У = (ул, У, --, Уп) налазе се у неком п-дим 

(у горњем примеру димензије п. = 5) апстрактном простору. Међутим, као вектори они разапињу 

паралелограм површине |х х у! = ||| у] ап Ф, где је ф = «(Х, у) угао између вектора. Разрађивао 
сам те геометријске начине својевремено, као у прилогу Мапјапсе Мектог (2016), али и другачије. 


Варијанса је посебан случај коваријансе када су две променљиве исте. Из прилога, али и из горњег 
примера види се да већој коваријанси одговара већа сагласност парова множених у сабирцима, а 
то значи да је већа ако множимо веће са већим разликама и мање са мањим, истог предзнака, па 
је она највећа ако множимо исте. У том максималном случају имамо варијансу 


Уаг(х) = Е[(Х — и)2] 
коју означавамо и са 02. 


Када је коваријанса занемарљива (нула), онда се случајне варијабле узајамно понашају као да су у 
безакоњу. Сваки низ ради само за себе, насумично у односу на онај други. Коваријанса тада може 
представљати нулту „узајамну информацију“, 5(р,4) = 0. Канал преноса информација, Х — У,аи 

обрунуто, производи толико шума да од дезинформација почетна информација бледи. Варијанса 

нам говори о пропусности сваког канала са неком његовом сопственом максималном вредношћу 

и разабирање оригинала порастом шума слаби. У другој крајности, када дисонантност даље расте, 
коваријанса је негативна и мери супротну узрочност. Раст једне променљиве значи пад друге. 


За још бољу симулацију узајамне информације послужиће корелација, са коефицијентом 


Сом(х, У) 


Согт(Х, у) = Уагодмаго у 


Тај означавамо и са 2 (Х, У). Предност корелације је, као што се види непосредно из формуле, јер 


је нормирана коваријанса. Увек је —1 < р(Х, У) < 1, а онда је лакше упоређивати дату корелацију 
са неком другом. Корак даље је информација перцепције. 
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56. Узајамна информација 

У претходним насловима припремљено је објашњење узајамне информације помоћу коваријансе. 
На слици видимо п-дим прстор случајних тачака. То су низови, вектори ОХ = + = (Х1, Х2, --., Ху) И 
ОУ = У = (у1, У», --, Уп) са заједничком средњом вредношћу, очекивањем и = Е(Х) = Е(У) 
којом је дефинисан вектор ОМ = т = (њи, ---, И). 


Овим векторима дефинисани су вектори: 


МХ = ОХ – ОМ = (= Духа мр а И) 
| 


— 


У = ОУ – ОМ = (у, –— и, у» — И, ., Уд – И) 


који су окомити на вектор ОМ. Ту сам окомитост, ОХ, ОУ 1 ОМ, доказивао раније више пута, када 
тога није било около, рецимо под насловом „3.6 Стереометрија статистике“ књиге „Информација 
Перцепције“, па овде нећу. Битно је препознати да скаларни производ вектора разлика, МХ · МУ, 
дефинише коваријансу, корелацију, затим узајамну информацију и информацију перцепције. 


У случају да коефицијенти вектора Х и у не припадају истој расподели вероватноћа, што је чешће у 
пракси, појавиће се два правоугла троугла ОМ;Х и ОМу7У, са очекивањима: 


Ха + Х; Во Ху 
[Ри 


п 
„АЛЕН 


У п 


којима су дефинисане тачке М; и Му, односно вектори: 
ОМ; = ћу = (их Иу, --,Их), ОМу = ту = (у ај. 


Ови вектори одузети редом од датих Х = ОХи у= ОУ дају векторе разлике: 
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Ах = х – ту, АДу=у—ту 
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и постају вектори фактори коваријасе. Они се могу даље третирати са неким (сваким) заједничким 
почетком, назовимо га поново тачком М. 


Било да су компактни као на горњој слици, или одвојени парови, скаларни производи вектора: 
ОХ ·0У = [ох ||07 | со «(ХОУ), МХ-МУ = [0Х ||07 | соз 4(ХМУ) 
х'у = |х у соге, –Ах-ду = |Ах||Ду| созф 


Ови еквивалентни парови записа који сличне интерпретације. Посебно, доле десно је узајамна 
информација 5(Х, у) = Ах · Ду, скаларни производ вектора разлика који нам говори о односу 
улазне и излазне информације неког канала. 


Када је број 5(Х, у) позитиван, тада су улаз и излаз сагласни, већи улазни бројеви даваће веће 
излазне и обрнуто мањи мање, а када је тај број негативан канал ради инверзију, већим улазним 
случајним вредностима додељује мање на излазу, а мањима веће. Шта се у каналу тачно дешава и 
како он то ради у тој интерпретацији је небитно. 


Препознамо ли производ разлика, ДАХ · Ду, даље као информацију перцепције, такву информацију 
можемо/морамо посматрати и као негативан број, а спискак мањкавости Шенонове дефиниције, 
ако је сматрамо неком општом, продужити. Са друге стране, нити узајамну информацију не треба 
третирати као општу, јер је она ограничена на различите појаве „истог“, на „улаз“ и „излаз“ њених 
вредности, односно стања пре и након процеса. Она се таква не односи на Шенонову изворно, 
средњу вредност дате расподеле вероватноћа. 


Такође, примена производа разлика у информацији перцепције слично је ограничена. Стање 
разликујемо од процеса као што физички простор разликујемо од времена, или као што вектор 
(чија интерпретација је квантно стање) разликујемо од оператора (који интерпретира квантни 
процес) који га мења. Међутим, оператори (штавише, сви у математици) врста су вектора (дуални 
су онима на које делују), па поменуте посебности и нису суштинске. 


Постоје дубље, суштинске, односно заједничке законитости које управљају једанко како „обичним 
векторима“ тако и „операторима векторима“, стањима као и процесима, односно просторним као 
временским феноменима. На пример, једнако како по процесу можемо препознавати стања (не 
понашају се сви исто у истим условима), тако и стања бирају процесе (нпр. сила бира набоје). 


Уосталом зато ми је било могуће на три просторне димензије доказати егзистенцију још три 
временске, или показати (Простор-Време) да би се једначине теорије релативности једнако 
понашале када бисмо из тог скупа шест просторно-временских димензија издвојили било које 
четири, од којих би три биле просторне а четврта временска имагинарна њима. 


жжж 


Напомињем да ова „узајамна информација“ није тачно она о којој сам писао 80-их и у књизи 
„Математичка теорија инфорамције и комуникације“ (немам је дигитално, потражите издање 
1995. Удружења математичара Републике Српске у библиотеци), а која се и овде помиње као 


5(Х, У), 5(ХУ), или 5(а – ђ), за разлику од нове 5(а, ђ) гдесуди ђ вектори са координататама 
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вероватноћама расподела случајних променљивих из скупова редом Х и У. У литератури, стара се 
обично означава са Н(Х, У ), замало. 


Тешко је у овом тренутку рећи којој би, 5(а, ђ) или 5(Х, У), назив „узајамна информација“ боље 
стојао. Ту ћемо дилему имати и касније, али за сада приметимо да машинско учење употребљава 
Пирсонову корелацију и да њој боље лежи 5(а, ђ). Међутим, та корелација је мера која проналази 
само линеарне односе и то сужава нашу примену у информатици, док не укључимо и статистике 
нелинеарних односа. Преме томе ће и разрада која следи [58.] бити сами почетак ове приче. 


У наслову „43. Условне вероватноће“ уведен је класични појам узајамне информације 5(Х, У), са 
овде прихватљивима шумом канала 5(У|Х) и информацијом излаза 5 (У), и показано је да важе 
формуле попут 


5(Х, У) + 5(71Х) = 507). 


Ова како за непрекидне тако и дискретне информације. Аналогно, у литератури ћете најчешће 
(Митиа пТогтаноп) наћи формуле: 


106 У) = НОО – НАДУ) 
= Н(У) – Н(У|Х) 
= НОО +НО) – НУ) 
= НОУ) – Н(АЈУ) – НОЛХ) 


где су Н(Х) и Н(У) тзв. маргиналне ентропије (рецимо улазне и излазне), Н(Х|У ји Н(У [Х) су 
условне ентропије, а Н (Х, У) тзв. удружена ентропија (јогл! епгору). 


На слици Венових дијаграма десно, помоћу 

скупова покушано је дочарати о чему се ради. нод 
Област оба круга је „удружена ентропија“, тј. 

Н(Х, У). Леви од кругова (црвен и љубичаст) је 

тзв. „индивидуална ентропија“ Н(Х)), рекли 

бисмо маргинална, или улазна. Црвени део 

била би „условна ентропија“ Н(Х У). Круг на 

десној страни (плаво и љубичасто) је Н(У), са 

плавим Н(У|Х). Љубичаста је та „међусобна 
информација“ 1(Х; У), у преводу и узајамна, НУ) 
заједничка, или обострана. 


Лепо нацртана слика, осим што је нетачна. Ентропија и информација датог система нису заједно 
растуће величине, већ напротив. Да не дужим зашто, видите моје последње популарне прилоге о 


томе (АЕ р://тмикомјс.пе б!ов/2202 ћит! ). 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


57. Опет Кеплер 

У константним условима коефицијент корелације датих појава показиваће константне вредности, 
наравно, у оквиру статистички дозвољене грешке. Како корелацију, узајамну информацију, па на 

свој начин и информацију перцепције, генерише исти скаларни производ, 5(Х, у) = Ах · Ду, како 
смо то видели у претходном наслову [56.], то „константни услови“ значе исте вероватноће датих 

догађаја, непромењен канал преноса информације, сталне перцепције. Сада ћемо ту законитост 

одржања, тако постављену, упоредити са „силом неизвесности“. 


Вероватноће се могу изводити директно из амплитуда, а тек секундарно везивати и проверавати 

на класичним вероватноћама математике. То у складу са квадратима модула амплитуда квантних 
стања, |Лу||2 = у“, вероватноће налажења обзервабле“ у квнтној механици. Сагласно томе су и 
„случајне варијабле“ понекад „квадрати интензитета амплитуда“. Објашњења самог тог Борновог 
закона давао сам у књизи Квантна механика. 


Узимајући за случајне варијабле квадрате интензитета амплитуда, у општем случају комплексних 
бројева, очекивање се своди на: 


2 


га | ара У, 


уп уп уп 
па ако пређемо на „скраћене векторе“ (у — уу' = у/ уп), биће Е (у) = пЕ (у'). Пре евентуалног 


детаљнијег редефинисања класичне вероватноће на неку комплексну, застанимо на ономе где 
смо већ стигли у претходним насловима. Коефицијент корелације је: 


У; 


2 2 
+ | ++ | 


1 2 2 2 
бр = (уђе + ој + +) = | 


Сом(х,У) 
РЕИ-ОКЦАНИ) МагООМаг(у) 
ТУ по, – њо(ук – ну) ТАФ-А  ЈАЗПАр 
пак=т ки — Их Ук — Шу = _ |Ах Ду] созф 


"ЕН АЕ] со5ф. 
1 1 2 11АгПА> [АД 
= 20 (ак = шоа Ј- 21 (ук— ну) п У 


Коефицијент корелације је константан ако и само ако је угао ф = 4(ХМУ) између вектора ДХ и Ду 
константан [56.]. Сличан резултат се добија сменом Ах — ДХ' = АХ/ћ, јер је: 


Аналогно радимо са осталим случајним варијаблама (У — У'). Израчунавамо и коваријансу:: 


Соу(њУ) = = | - - ту ог – пед(ук = ну) = 5 (Ем) (7) = 


= Ах' · Ду' = |Ах ||Ду' | сов ф, 


= Обзервабла – физички мерљива величина. 
12 Теорија вероватноће користи количник п уместо статистичког п. — 1. 
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јер угао између вектора (ф) не мења се самим скраћивањем вектора. 


Крајњи прелазак на комплексну вероватноћу, онакве врсте која би одговарала квантној физици, 
није неопходан да приметимо горње резултате. Угао ф = 4«(ХМУ) остаје константан, а аналогно 
следи са слике (претходног наслова). Текст непосредно наставља расправу о слици из претходног 


наслова, па главно не понављам. Све постаје јасније када су очекивања једнака и т, = ту = т, 
затим је лакши прелаз на општији случај. 


Растом броја п компоненти вектора х = (1, Х, ...,Ха) и У = (ул, У», ---, Уп) Њихова очекивања 
(средње вредности) статистички се не мењају. Равномерно се скраћују вектори Ах' и Ду', правци 
им остају непромењени (према претходном) и угао који заклапају остаје исти. То значи да се дуж 
ХУ, као и Х'У', из тачке М види под истим углом ф док се краци тог угла скраћују, сваки посебно 
сразмерно уп, па се (слични троуглови) скраћује и дужина ХУ том истом размером. 


Даље посматрајмо веће троуглове, прво правоугли ОМХ. Док п расте, хипотенуза ОХ, као и катета 
ОМ, повећавају свака сразмерно уп, то се краћа катета смањује сразмерно коефицијенту 1//п. 


Х2 По томе, синус оштрог угла у темену О смањује 
се сразмерно 1/1п и површина троугла ОМХ не 
|Х мења се. Површине троуглова О, МХ, и О, МХ, 
једнаке су, а то је управо оно што је овде већ 
01 М доказивано генерисањем случајних бројева в. 
наслов „28. Центрифуга неизвесности“ и слику. 
02 


Да се веће странице троугла ОМХ, па тако и троугла ОХУ, повећавају сразмерно уп (а не рецимо 
са п), видимо из следећих једнакости: 


ОМ = [0М] = |т] = |(љџ, ..,п)] = Ји "из + из = ит + 1 + +1 = иуп 


а очекивање (средња вредност) џи за једну исту расподелу не мења се без обзира на број исхода п. 


Други већи троугао био је ОХУ. Његове странице ОХ и ОУ, са већим п све су дуже, а основица све 
краћа, па је угао 0, под којим се та основица ХУ види из темена 0, све мањи. Опет се испоставља 
да је површина троугла ОХУ константна док се теме О удаљава од М, као на слици лево. То је као 
у случају слике десно наслова „24. Примери регресије |!|“, тамо доказивано софтвером а овде само 
геометријски. 


У овој скрипти откриване и назване „силе неизвесности“ гурају случајне варијабле као набоје. Али 
заправо то су тачке у простору вероватноћа које се пресликавају, кажемо „померају“ по законима 
еквивалентим поопштеном Другом Кеплеровом (за једнака времена потег сила-набој пребрисаће 
једнаке површине), иначе важећи за све константне централне силе. Кулонове, или гравитационе, 
на пример. 
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58. Збир канала 

Улазна информација у канал К је расподела вероватноћа р; = Рг(о;) Е (0,1), причему је о; Е О 
поједина порука индекса : Е [1,2,...,п), дакле а; Е (001, 0, ..., (), ). Како се сабира информација 
5(р) те расподеле р = (р1,р,, --., Ра) када је поделимо на тачно две здружене поруке вероватноћа 
а=р,+ее Рргиђ =р1 + + ру прво је питање. 


Теорема 1. Дата је расподела вероватноћа компонентама вектора р = (р1, ...,рр, --- Ру) И поделом 


а=ра+:е"реоћ =руј1 + + ру: Тадасуа = (рл/а, ...,рујај, ђ = (ру-1/5, Руј), С = (а,ђ) 
опет неке расподеле вероватноћа. При томе важи једнакост 


5(р) = аз(а) + Б5(Ђ) + 5(2), 
где су функције 5 информације по Шенону. 


Доказ: Да су а, ђ, с, као и р расподеле вероватноћа очигледно је. Даље, користећи Шенонову 
дефиницију добијамо следеће три једнакости: 


аз(а) = –руПовра – : — р,1овр, + аЛова 
Б5(ђ) = –р,аа [обруча – '' — Рујоврл + БЛовђ 
5(с) = –алова — БЛорђ 
из чијег сабирања следи 5(р) = —р, ов, – :· — р,1ог р,, што је требало доказати. Ш 


Применимо ово на канал који се састоји из два дела, К = К; + К,, паралелне везе као на слици. 


А К 


Сигнали долазе слева из Х. У тачки Р раздвајају се и део иде ка тачки А а остатак ка В. Део А улази 
у канал К; а В у канал К, након чега се излазни сигнали састају у 0 и настављају десно ка У. Према 
томе, канал К = Ји] представља блок матрица 
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о ЋЕ, 


где су К, = [ки], и К, = Је] _ дијагоналне квадратне матрице. Другим речима, К;; = 0 ако је 

гСтиј "> т,илиакоје!>тиј < т. Улазни вектор је р = (р1, ...,ру), излазни д = (41, --., Фу). 

Вероватноће улазног вектора р = (р1, -..,р,, --- Ру) канала К опет раздвајамо на збирове: 
а=р,+ееФр;, В=руа +: Фра 


тако да имамо расподеле: 


= (2 5), ђ = (855, 5), Ф= (а, ђ) 


као у горњој теореми и, према томе, улазна информација је 5(р) = аз(а) + рУ(ђ) + 5(С). 


Излазна расподела из канала К = Ји] биће 4 = (41, -. Фу ---, Фу), такво да је д = РК. Како је 


информација канала иначе 


п 


фје1 
то горња теорема важи и за излазне поруке, па можемо писати 
5(ф) = а'з(а') + '5(5') + 5(2) 
са одговарајућим поделама датој) а' = а, +" Таб = фл + Тада, а' = (а1/а', ...,д4;/а'), 
ђ' = (да 4+1/Б", ---, Фу/ђ ) и С' = (а',Б"), сада излазне расподеле. 
Теорема 2. Шум збирног канала (К = К; + К,) једнак је збиру шумова сабирака (К) и К ). 


Доказ: Информација :-те врсте канала је УК), =5,=– а Ку ов К;ј па за дату расподелу р 


средња вредност информација врста канала, што је и шум канала, је: 


п т п 
ми р; р; ~ | = УК РА 
5(а |р) = У 8 = ау 55 + > + 5 = 5(а ја) + 5(Б'|ђ) 
1 Рен 


1=7+1 
Дакле шум К једнак је збиру шумова канала К) и К. 


Информацију збирног канала такође можемо сматрати једнаком збиру информација сабирака, јер 
улазна информација у каналу не нестаје тек тако, она се евентуално само дезинтегрише. Прилично 
је то и интуитивно јасно. Канал производи сметње, сопствене информације које такође не настају 
из ничега нити нестају у ништа. Укупна информација огригинала и укупни шум настао успут додају 
се. Међутим, информација је „количина опција“, а не рецимо нека „суштина“, скуп знања, па се 
може одржавати и тако што читаоцу постаје неразумљива. 


Информација не тежи да буде „смисао“, или неки нама интелигентан облик података, сем када је 
принцип минимализма, или нека друга принуда тамо не доведе. Исто важи и за низ канала. 
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Надовезивањем исте поруке на нови исти канал настаје серијска веза (не паралелна као на слици). 
Њој одговара множење матрицом канала. Код простог дуплирања дате, имамо: 


~ 2 ~ 
рр_р_[ћ 0) _(. 0 
о К, 0 К2 


дакле опет блок матрицу, сада са квадратима првобитних блокова. Уопште, за дужи ланац је: 


р _(ћ ој (Ко 
0 К, 0 К2 


што је лако доказати индукцијом. То је увек ланац са две серије, два режима рада. Информација 
послата серијом, иначе, па и кроз низ оваквих блок канала, прилагођава се базном каналу (К), она 
се адаптира и тежи својственој датог образца ових везаних канала. То је тежња шума. Бескрајним 
надовезивањем истог канала, канал се засићује додајући сопствену информацију укупној, стиже 
ка неком својственом максимуму и све више стагнира. 


58.1. Капацитет канала 

Максимална информација коју канал може пропуштати је капацитет канала. Капацитет канала, С, 

је класично (Шенон, 1948) описан као максимална брзина којом се информације могу преносити 

кроз канал, а те се одреднице можемо држати иако је њена првобитна намена била, а углавном и 

остала, сужена на брзине преноса симбола (слова) преко канала. У тој терминологији „ентропија“ 
и 


случајне променљиве је просек обима „информација“, односно „изненађења“ или „неизвесности“ 
својствених могућим исходима варијабле. 


1. Основна теорема бешумног канала гласи: „Ако језик има ентропију Н (битова по симболу) и 
канал може преноси С бита у секунди, тада је могуће кодирати сигнал на начин да се преноси 


с 
просечном брзином од 76 симбола у секунди, при чему 2 > 0 можемо узимати произвољно 


| С. 
малим. Пренос је немогућ просечном брзином већом од и 


2. Основна теорема за дискретни канал са шумом: „Нека дискретни канал има капацитет С, а 
дискретни извор ентропију у секунди Н. Ако је Н < С,тада има начина кодирања тако да се излаз 
извора може пренети преко канала и уз произвољно малу фреквенцију грешака (или произвољно 
малу двосмисленост). Ако је Н > С, произвољно мала вероватноћа грешке није достижна. “ 


Дакле, капацитет канала је максимална брзина информација коју канал може да пренесе. Мери се 
у битовима у секунди (брз) и грубо вреднује, процена узима у обзир само целу количину пренетих 
података, а изоставља квалитет комуникације. 


Пропусни опсег (Вапамла ћ) се може сматрати подскупом термина капацитета канала. Када мери 
пропусни опсег, формула урачунава максималну количину информација која се може прецизно 
пренети у јединици времена. Међутим, на пример, капацитет канала може бити веома висок, али 
низак квалитет сигнала учиниће ниским пропусни опсег. 


Шенон-Хартлијева теорема каже да је капацитет канала С теоријски најстрожа горња граница за 
брзину информација података која се могу пренети са произвољно малом грешком и просечном 
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снагом примљеног сигнала 5 кроз аналогни комуникациони канал подложан адитивном белом 
Гаусовом шуму (АМ/ОМ) снаге М 


С=В1 (1+2) 
= Б 1082 М 


где: 


• (С јекапацитет канала у битима по секунди; 

• _В јепропусни опсег канала (бапамма ћ) у хецима; 

• 5 јепросечна снага примљеног сигнала преко пропусног опсега, мерена у ватима; 
• М је просечна снага сметњи у пропусном опсегу, мерена у ватима; 

• 57М је однос сигнал-шум, или носилац-шум на пријемнику. 


На пример“, за типичну телефонску линију (модем) са односом сигнал-шум од 30 аВ и пропусним 
опсегом звука од 3 КН2, максимална брзина података је С = 3000 102; 1001 ~ 29,901 Ккбрз. 


За сателитски ТВ канал са односом сигнал-шум од 20 аВ пропусним опсегом видеа од 10 КН2, 
добијамо максималну брзину преноса података С = 10 000 000 102 101 ~ 66,582 Ккбрз. 


жжж 
Мало другачији приступ је разумети капацитет канала као максимума узајамне информације 


С = тах (%; У) 
Р(х) 


где се максимум тражи у свим могућим улазним дистрибуцијама р(Х). 


На пример, писаћа машина са сметњама и вероватноћом скретања 0,5 и 30 улазних симбола 
(можемо ићи са сваким другим словом и проћи са 15 бита). Израчунавамо: 


С = тах (Х; У) = тах[Н(У) – Н(У|Х)] = тах Н(У) – 1 = 102; 30 — 1 = 105, 15. 
163) 16) р(х) 
Уопште, за вероватноћу р, налазимо: 


107) = НО) – НОЉО = нОо0 – У РОдНОИХ = 2) = 
= но) – У рбдн(р) = Н0') –Н(р) < 1–НФ) 
дакле, С = 1— Н(р). 


| . а 11 
Други пример, канал са шумом и не-преклапајућим излазима. С = 1 | са расподелом р = (5,2). 


Њ – 11 
Такође, канал без шума и грешака двосмислености. С = 1 ЊЕ са расподелом р = (5, =). 


13 [ [| Рејегзоп апа В 5 Оаме, Сотрџитег Мећмогк5:а зузкегтл5 арргоасћ (Мограп Каџ!тапп), 1996. 158М: 1-55860- 


368-9 (Рарегђаск 158М: 1-55860-404-9 ) рр 94-95. 
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жжж 


Са становишта моје „теорије информације“ (незваничне) класични приступ капацитету канала је 
сувише ограничен на област (слова и симбола) где се углавном до данас и користи. Та класична 
теорија недовољно је применљива у области космологије, гравитације, електромагнетизма и сл, 
нити је на нивоу у доменима квантне физике, као што није нити у широј хемији, биологији, науци 
психе или заједница. Ни не тврди се да јесте, знам, али како то да примена информатике стиже са 
вештим инжењерима и програмерима и тамо где та теорија не добацује. 


На пример, надмашивања класичног третирања капацитета канала (Веа па ће сћаппе! сараску) 
примећена су бар две деценије у квантној физици, али одговарајуће „теорије информације“ да те 
појаве објасни нема. Нема је, јер се из постојеће она не да извести. 


Скок који нам је потребан је посматрање информације као ширег феномена, који се не може 
извести из њене досадашње скучености. Информација коју нудим је основно ткиво природе око 
нас (простора, времена, материје), а објективна неизвесност је њена суштина. Нуди се признање 
квантној механици да у расподели вероватноћа, може то бити и р = (р1, ..., р), њене компоненте 
треба даље разлагати, попут ру = |Пу||>, при чему величине у могу бити и комплексни бројеви (и 
не само они), а норме ||-|| не само еуклидске. 


У том контексту, капацитет канала можемо видети кроз пресликавање у = АХ тако да је 
с= тах || 4 || 
х 
где је улазни вектор х датог канала А произвољан, па је капацитет С највећа могућа вредност 
излазне норме ||у ||, односно могућности излазног низа. 


Саму једначину (Х; У) = Н(У) – Н(У|Х)), њене делове, треба редефинисати. Обим „предлога“ 
тих редефиниција (мојих, необјављених) превелик је, претрпан сам непровереним „опцијама“, 
попут дезинформација. Неке идеје већ сам изнео у тексту, а ево још једне. 


Грубо, узајамна информација је скаларни производ вектора, који је иначе већ уграђен у варијанси, 
коваријанси, или корелацији, 1 — У; а;ђ;, где су фактори разлике х; — џи; односно у; — џу. Ако је 
условна тзв. ентропија Н(У |Х) конволуција, имаћемо (отприлике) ово: 


п п п 
1(Х; 14) + Н(У|Х) — |; аб; + > ау—18; = У (а + ал— 08; = 
:=1 :=1 :=1 


п п 


Х; + Ха— 
= У ба + хр= – ги (у; – Иу) = У (о = на) ћу; 


!=1 :=1 
п п 
~ 2 оу ћу; ~ га" У ћу, = 4о' (ул ве у, – пџу) ~ 2по' „а у. 
11 јЕ1 


Низови су растући, па је приви збир максимум а други минимум могућих пермутација. 
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59. Периодични сигнали 
Посматрајмо матрицу ротације за 60“, тј. = радијана: 


п  л 1 МЕЈ 
РЕ с05 Е 51 Е 2 2 
п п 
5 ~ с05 — МЕ 1 
2 2 


Њен квадрат је ротација за двоструки угао (120), куб за троструки (1809) и редом даље све већег 
угла до шестог степена када се направи пуни круг (3609). Степенујући даље ротације иду као да их 
пре није било, из почетка, јер 46 = А. То је пример периодичне појаве. 


Сличо се може десити у Марковљевом“ ланцу или процесу“. Отуда нам је позната теорема да ће 
два комутативна (то нама значи и независна) сигнала, ако су периодични, онда бити периодични 
са истом периодом. Када први сигнал у п-том кораку пређе у други, а други у т-том кораку пређе 
у први, онда су бројеви конгруентни по модулу периода сигнала. 


Нећу преписивати добро познате доказе ове теореме, јер ми се чини очигледном. Наиме, матрица 
канала попут наведене ротације, све периодично мења на шта год да делује. Све делове процеса 
које генерише она сваких шест корака понавља, али неки у то време могу бити понављани и више 
пута, на пример два или три. У два циклуса матрице, процес који се у сваком поновио два пута, је 
поновљен четири пута, а онај бржи који се у сваком циклусу понови три пута, поновиће се шест 
пута. Да би се таква поклапања догађала, битно је да су овде 2 и 3 делитељи броја 6. 


Међутим, сигнал не мора прећи у неки други сигнал (истог ланца) да би ланац био периодичан. 
Следећи пример може представити разне такве могућности. 


Пример 1. Низ три броја (а, ђ,с) — (ђ, а, с + а) трансформише се тако да у сваком кораку прва 
два замене места, а трећи се увећа за константан број 4. Ако су бројеви а, ђ, с следећи декадни 
којима се води само задња цифра, а а = 4, генеришу ланац трансформација: 


Уни Си 


Након 10 корака понавља се почетни распоред. При томе горња (прва) два броја прелазе један у 
други, а доњи (трећи) никада не узима вредност неког од та два. [0 


У наведеном примеру, када су бројеви цели, сваки целобројни додатак генерисаће неки ланац 
који се понавља. Тада је доњи број увек нека од десет цифара 0, 1, ...,9 и након највише десет 

корака она се мора поновити. Ако су тада горње две цифре замениле места, након следећих 10 
корака оне ће их опет заменити и имаћемо почетни распоред. Али ако су бројеви а,ђ, с цели,а 


14 Марковљев ланац или процес је стохастички модел који описује низ могућих догађаја у којем вероватноћа 


сваког догађаја зависи само од стања постигнутог у претходном догађају. 
5 Марковљев процес је верзија Марковљевог ланца са континуираним временом. 
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додатак ирационалан, 4 27, онда нема периодичности. Ово се може посматрати још општије. Са 
вероватноћама је слично, само је мање извесно. 


Нека је у датом Марковљевом ланцу К; (п) вероватноћа да сигнал е; пређе у неки (нови или исти) 
сигнал е; након тачно п корака. Нека је а; (п) вероватноћа да е; пређе у исти сигнал након тих п 


д; = У ди(п) 
п=1 


је вероватноћа да сигнал е; у било којем кораку п. = 1,2,3, ... постане опет сигнал е;. Кажемо да је 
сигнал е; повратан када је 0; = 1. 


корака. Збир 


Када се након п. корака деси понављање е; — е;, такво би се могло дешавати опет сваких следећих 
п корака и бесконачно много пута, јер оно значи већу извесност циклуса те коначне дужине. Онда 

то значи да ред У, 2—1 К; (п) дивергира (збир је неограничен). Са друге стране, ако се то не дешава, 
тај ред не дивергира, онда је 0; = 1, јер је низ ад: (1), 4; (2), д:: (3), ... расподела вероватноћа. Тако 

можемо покушати интуитивно разумети следећи став. 


Теорема 1. За сигнал е; у хомогеном Марковљевом ланцу вреди једнакост 0; = 1акои само ако 
дивергира ред У у—1 К; (п). 


Доказ: Означимо са д; (т.) вероватноћу да сигнал е; након тачно т корака по први пут постане 
'Ј 1 
сигнал е; (; = ј). Према формулама потпуне вероватноће имамо: 


кујбт) = У аутубт – т, 
т=1 


где је Ку (0) = 1ип = 1,2,3,... Отуда је: 


т т п 


Куби) = >, У, аут) куби – т) = 
1 


п=1 п=1т= 
= ду ОК (0) + 


"а ОК а) + а 2) КО) + 


"ај ЈЕ (кг — 1) + фу СЈКру (ут — 2) + а (Ку (0) 


т 


22 


п=1 


т 


ОВЖЛОКО 


Додамо ли унутрашњем збиру овог резултата неколико ненегативних бројева, биће 


3 Куп) < Уз фу(т) > Ку(т) +1 
п=1 те п=1 
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Одузмемо ли истом резултату неколико сабирака биће 


т 1" т-т' 
У кубд = У аут | У кубо + 1 
п=1 т=1 п=1 


где је 7' < т. Када поделимо последње две неједнакости истим збиром, ставимо да " — со, затим 
т' — со, добијамо 


Ја Ег (п) 
ј2 И СОДЕ арте жири Ур Крт) 


Отуда је 


– 1 
1— Ра (ст а <= 
4 ди(т) = БЛ нису 
т=1 
тј. вреди једнакост 1 — 0; = 0 ако и само ако ред У 2 —, Ку (п) дивергира. ш 


Када се у неком (п-том) кораку хомогеног Марковљевог ланца појави сигнал (2;) који је повратан 
(0; = 1), онда се може очекивати да ће се сваких коначно много корака појављивати исти сигнал. 
Такав сигнал ће се у бесконачном броју корака, са вероватноћом 1 јавити бесконачно много пута. 
Ово је непосредна последица хомогености ланца на основу које можемо доказати да је повратан 
сигнал уједно и периодичан. 


Важи и обратно, ако се у неком кораку хомогеног Марковљевог ланца појави сигнал (е;) који није 
повратан (0; < 1), онда можемо интуитивно предвиђати да ће се тај сигнал у остатку ланца јавити 
највише коначно много пута. Другим речима, тај се сигнал (е;) са вероватноћом 1 након коначно 
много корака више не појављује. Управо то ћемо сада доказати. 


Теорема 2. Ако за сигнал е; у хомогеном Марковљевом ланцу вреди неједнакост (4; < 1, онда 
појављивање тог сигнала највише коначно много пута у том ланцу има вероватноћу 1. 


Доказ: Нека је у, број појављивања сигнала е; у ланцу након п корака. Према претпоставци је 
Рг(у С с) = 0, <1. 
Због хомогености је 
Р(ији)=0; 
а отуда: 
Рг(у; < со) = Рг(у < о) Рг(и | у) = 02 
и уопште 
Рг(у, С о) = 0: 


за п = 1,2,3,..., па је 
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со п 
У Ри С) = > 0! < о 
п=1 п=1 


Нека је А, догађај да се у п-том кораку ланца појавио сигнал 2е;, па је |Ју—,, А, догађај реализације 
бар једног од А,у, Алу+1, Ап42 - па ако то важи за свако т биће (12 –1 (02—, А) догађај да се 
реализује бесконачно много догађаја из низа Ај, Аљ, Аз, .... Отуда је: 


со 


[7 () Ал || = ит, Рг () Ар |] < а. > Рг(Ау) < 1. Ра Рг(у, < ) = 0. 
п="т"т, п=т 


т=1 мт=т п=т, 


Добили смо да се вероватноћом 0 сигнал е; бесконачно много пута јавља у Марковљевом ланцу, 
тј. да појавасигнала е; коначно много пута у ланцу има вероватноћу 1. ш 


Ово су познате теореме са којима сам се пре 3-4 деценије охрабривао да наставим са „теоријом 
информације“ (новом). Писао сам тада отприлике овако. Како је могуће да теорија информације 
буде формално једнака некој теорији случајних система 2 Само наше схватање појма „догађај“ 
или „стање система“ објашњава такву аналогију. Ако се десио неки догађај ми то сазнајемо преко 
чула, помоћу мерних апарата, саопштења итд, дакле на овај или онај начин али увек помоћу 
података, или информација о том догађају. Не постоји други начин да доживимо стање било 
каквог система сем као информацију о том систему, претпоставка је. 


То онда значи да је сваки модел који правимо ради схватања стварности могућ тек онда ако је 
могућ одговарајући информатички модел, без обзира да ли смо овог последњег свесни. Са друге 
стране, ако је стварност за нас само оно што (на било који начин) неко од нас може доживети 
преко чула, тада је и информација стварна. Према томе је информација догађај, или му је бар 
еквивалентна у математичком смислу. 


Брзо се затим стиже до „принципа минимализма информације“, о спонтаној тежњи природе за 
мањом комуникацијом, мањој информацији, еквивалента начелној природној тежњи да реализује 
вероватније исходе чешће. Вероватнији догађај мање је информативан. Корак од тога је принцип 
најмањег дејства, иначе у теоријској физици одавно примећен и кориштен. Збуњива ме је била 
једино ентропија по Шенону, док се нисам одважио постулирати да већа ентропија супстанце 
значи мању њену (макар ефективну) информацију и ствари су легле како треба. 


Дакле, информација је ткиво космоса а њена суштина је неизвесност. Већа информација иде са 
мањом вероватноћом и обрнуто, тако да је неизвесност такође узрок и последица убрзања. Сила 
мења вероватноћу, па чаша остаје на столу иу следећим тренуцима, јер је такво њено стање 
највероватније – све док на чашу не делује нека сила и шансе промени. 


На пример, електрони у узајамном мировању привлаче се (Ситгепт ), а када се покрену иду један ка 
другоме, крећу се у супротним смеровима и – одбијају се. Сила мења вероватноће! Стога, мењање 
убрзања мењаће вероватноће, ове објасниће силе, а оне тежњу ка мањој информацији. Отуда све 
осцилације, али и свет уопште – требало је посложити. 
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60. Реципроцитет 

Сагласност принципу најмањег дејства је пасивност, одсуство супротстављања, препуштање као 
кладић низ воду. Супротност му је активност, сила, реципроцитет. Обоје обухвата „информација 
перцепције“, надам се, којој би требала бити блиска овдашња „узајамна информација“ 


5(а, ђ) = даћу + аб +. + даћу 


За почетак за коефицијенте ових вектора узимамо само ненегативне реалне бројеве, нормиране 
на јединицу и, штавише, оне који представљају расподеле вероватноћа. Нагласићу који се, зашто и 
како, од општих налаза евентуално не односи на поједине остале врсте бројева. 


Пример 1. Када се први низ раставља на збир два низа, а = и + 7, информација перцепције се 
раставља на збир две одговарајуће информације перцепције. Наиме: 


з(а,ђ) = 5(п + 9,5) = (и + 215, + (и; + и2)5; + - + (иу + ба = 
= САД + ирбћ> +. + изђћу) + (па бу + у>б +. + рађћу) 
= (5,5) + 5(8,5). 


То је особина адитивности. Хомогеност, 5(Ла, ђ) = 45(а, ђ), је такође лако доказати, па кажемо да 


информација перцепције има особину линеарности. [0 


Адитивност информације перцепције је разлог да је тачан и став из претходног наслова о збиру 
канала [58. Теорема 2.], у случају да је сматрамо узајамном информацијом. Узгред приметно је, 
ако 5(а, ђ) мери узајамну информацију канала, онда је она већа када јачи сигнал преноси у јачи 
одговарајући, а слабији у слабији. Када се догађа обрнуто, да јачи сигнал иде у слабији а слабији 
улазни на одговарајући јачи излазни, снага је узајамне информације канала најмања. То показује 
следећи пример. 


Пример 2. За оба растућа (опадајућа) низа број 5(а, ђ) имаће максималну вредност у односу на 


све пермутације датих низова а = (а1,8;, ...,ау)јићђ = (бу,ђ,.. ,Ђу). 


Наиме, када је п. = 2, из очигледног (а, — а )(6> — Ра) > 0 следи адб, + а;ђ, > азбо + абу. Из 
ненегативног резултата множења две позитивне (или обе негативне) разлике, следи тврђење. А 
отуда, када имамо дуже низове и први је монотон (растући или опадајући), при чему други није, 
замена места пару по пару другог који не следе монотоност, сваки пут ће повећавати 5 до највеће 
вредности када ће други постићи уређеност првог. [1 


На начин овог примера открива се и друга крајност, да ће број 5(а, ђ) бити минималан када су 
дати низови супротне монотоности, један растући а други опадајући. Ова друга крајност, најмање 
снаге канала, рецимо у случају једнаке уређености низова (да су оба растућа, или оба опадајућа) 
одговара „конволуцији“ 


5(Ђја) = даћу + аоћу—1 + + аућа. 
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Векторе (расподеле) намерно растављам знаком који подсећа на условне вероватноће, јер већа 
одређеност а смањује шансе ђ, односно број 5(ђја). Овакав збир нека је средња вредност, чини 
је производ просечних могућности утицаја ова два низа: 


з(а,ђ) + 5(Ђја) = 
= (аб, + аб, + + аубћу) + (ајћу фаљбу_1 + + аућу) 
= ај (6, + бр) + ау(бу + бр 1) +: + ау(бу + Б1) 
~ (ај + а; + + + ап)2ир = па 


где је џ; врста средње вредности низа ђ, аритметичке средине одговарајујћих његових најмањих 
и највећих бројева, а и, је аритметичка средина низа а, док је п број чланова сваког од два низа. 


Средња вредност овог збира, максимума и минимума „перцепције“, или њихове „узајамности“, 
расте са бројем компоненти п низова. То се противи начелном „минимализму информације“, или 
што је исто „максимализму вероватноће“, па се вероватно не догађа дивергенција резултата. Да 
би се то избегло, 27 и — 90, биће тешко постизати све већи број преносних сигнала (7), или бар 
већих просечних интензитета перцепција (и И бр), или обоје. Прво ограничавање је, на пример, у 
броју чула индивидуе која „опажа око себе“, а друго просечне „снаге“ њених перцепција. 


Видели смо да је узајамна информација канала, овако дефинисана, још једна врста информације 
перцепције субјекта и објекта (а и ђ). Са већом „пропусношћу“ таквог „канала“, субјекат има бољу 
комуникацију са објектом, својим окружењем. Можемо рећи да је субјекат тада виталнији, упућен 
на више могућности (опције без могућности дејства би биле илузорне), живахнији и свестранији. 
Отуда радозналост и разноврсност, јер информација је са једне стране мера количине могућности, 
опција, а са друге еквивалент је физичког дејства. Она већа значиће већу моћ пркошења принципу 
минимализма теоријске физике, такође, те утолико мању мртву твар физике. 


Међутим, витално стање је напето, силовито, оно тежи да се смири и да се смањи, да се препусти 
инерцији, лењствовању, да буде налик смрти предајући вишак информације околини, колико му 
то закон одржања информације дозвољава, као и околина која би и сама то исто. Алтернативна је 
могућност предаја идивидуалних слобода (чит. информације) вишој организацији, када се таквој 
може јављати емергенција, све већа виталност колектива. 


Свака индивидуа има неки „појас удобности“, распон властите „узајамне информације“ који иде 
од сопствене минималне до максималне вредности, ограничене пре свега законима одржања. Та 
се величина може „напрезати“, што је видљиво рецимо код живих бића у сукобима. Вођена тиме 
је моја класификација „снаге игре“ (М/п [о5е) у три категорије игара на победу. Виталнија игра има 
већу узајамну информацију опонената, шта год да су они. 


Гомилање информације у индивидуама може се дешавати упркос начелног минимализма, као 
што се слично дешава у олујама за чије честице као да не важи принцип најмањег дејства физике. 
То се догађа иако нема трајекторије честице која не следи из Ојлер-Лагранжових једначина, чија 
есенција је управо принцип најмањег дејства. Слично је и са гејзирима или вулканима за чије 


ерупције као да не важи привлачна сила гравитације. 
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Вишак виталности је пркошење, веће од онога које би чинила мање витална индивидуа, а свакако 
веће од мртве твари физике. У том смислу је вишак живахности вишак силе, поред вишка опција и 
интеракција. А како силу у односу на нешто можемо препознавати по промени брзине у односу на 
то, кажемо да сила (телима, честицама, таласима) даје убрзање. Зато убрзања откривају присуство 
сила, а то опет значи да трагом убрзања налазимо мењање (перцепције) вероватноће, те њихово 
повратно деловање у измени саме силе која их узрокује. 


Тако можемо описати осциловање. Оно настаје сменама привлачних и одбојних сила које једна 
другу редефинишу. Поменуо сам да се електрони у кретању истим правцем и смером, као и у 
узајамном мировању, вероватније привлаче (Сиггеп!), да би се покренути један ка другоме (или 
један од другога) кретали у супротним смеровима и тада одбијали. Истоимена наелектрисања и 
на тај начин (поред уобичајеног) можемо видети као одбојне силе, јер ће кретања у супротним 
смеровима издоминирати мировања. 


Еквивалентно овоме је тумачење преноса виртуалне честице (сфере) фотона са једног електрона 
на други, када дође до размене спинова +1/2 електрина са спином фотона +1, а све у складу са 
законима одржања. Слично би се могло дешавати и са разменом виртуелних гравитона (још увек 
експериментално непотврђених) који због превеликог спина +2 не интерагују непосредно са овим 
најмањим честицама (фермионима и бозонима), него само са њиховим спојевима. Тако се дешава 
да тежиште честица иде за мањом информацијом, тј. већом вероватноћом, због „гравитације“, а 
када се са убрзањем претера, када честица изађе из свог „појаса удобности“, окреће се смер силе, 
јер претходна микро-сила генерише нову. 


Третирајући информацију перцепције као физичко дејство, налазимо њену промену по путу, или 
временом, сразмерну сили. Таква је тада и одговарајућа интерпретација узајамне информације. 
Кратко речено, дејство је производ импулса и пута, односно енергије и времена, а најмање такво 
реда је величине Планкове константе (ћ = 6,626 х 1073 тКв/5). Узимајући Д5 = Дрдх, или што 
је исто Д5 = ДЕДЕ, па је аналогно и са збировима таквих, биће: 

о: -— ЕДЕ - 55 ЕД 

— = = ј =— = —–- дДх = Х, 

Ах – Ах ЛЕ ДЕ 
јер сила на путу чини рад који је еквивалентан промени енергије (ДЕ = КДх), а промена силе 
временом мења импулс (Ар = КАЈ(). 


Узвраћање информације перцепције силом на саму себе, којом се она мења, периодично или не, 
врста је реакције на акцију, реципроцитета који не изостају чак и када наизглед нема опонената. А 
тај опонент увек постоји, јер је информација перцепције бинарна мера, ње нема за објекат за којег 
нема субјекта опажања. 
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61. Гранична расподела 


Дата је константна матрица канала К и посматрамо ланац трансформација расподела К". Ако се 
дати сигнал е појавио у п-том кораку нека је вероватноћа да ће се појавити и у п + 1-ом кораку а, 
а ако се није појавио у п-том кораку нека вероватноћа да ће се појавити у п + 1-ом кораку буде Б. 
При томе је р, вероватноћа да се е појавио у п-том кораку. Формула потпуне вероватноће даје: 


Руља = ара +Б(1 – рп) = (а – Б)ру + 6. 
Ставимо с = а – ђ, па израчунавамо рекурзивно: 
Рпза = Сра + 6 = с(сру–1 +5) + 6 = 
= сгру-1 + (с + 105 


= с ри-а Р(Е ЖЕИЈБ 


= Сп рр (С Се ФС + 1 


пзћ ђ 
ср == 


ђ 
ПО а прим с] <1. 


Дакле, константа р = ђ/(1 — с) којој тежи р, не зависи од р1. Тај број (р) је гранична или финална 
вероватноћа за сигнал е. Када је 0 Са < 1,бићеђ <1—а +, па је 0 < р < 1 и гранични број је 
заиста вероватноћа. Супротна верованоћа једа = 1–—р = (1—а)/(1—а + 5). 


Пример 1. Општа бинарна матрица канала има коефицијенте 
2 _ (Ка Каг 
о- к 
Ку Кор 
За први сигнал случајног вектора (коваријантног) је Ку = а и К, = ђ. Дакле, да би први сигнал 
имао наведену граничну вероватноћу, прва колона не сме имати коефицијент једнак нули. Из: 


(р,4) (8 14) = (ар + Ба, 1 – адр + 4 – а) = 


– ађ (1 –а) (1—ајћ (1—5)(1–—а) 
– (= 1т–а+ђ 1—а+ђ 1–—а+ђ ј 


- ( ђ 1–а ЈЕ ) 
"а ње ешеђу 


следи да граничне вероватноће формирају сопствени вектор дате матрице. [0 
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ђ 1–а 


ар 41 


–—а+ћђ 


такође сопствени вектор и следећој матрици 


#(; рј=г 
ђ Ђ/ 
што је лако проверити. Међутим, која год од ове две је К, приметимо да К", зап = 


мора бити ни једна од те две. Ипак је УК" = (уК)К““! = ок"! = ук" 2. = УК = у, паје у 
сопствени вектор сваке К". 


61.1. Лакши примери 

Занимљиво је да степеновањем матрице произвољних позитивних коефицијената настају матрице 
са не већом разликом коефицијената унутар колона (врста). То је ергодичка теорема Маркова! по 
њему зазваних ланаца. Изнећу и општи доказ на крају, а пре тога погледајмо неколико посебних 
једноставнијих ситуација. Разрадићу их на матрицама другог реда. 


Ако су колоне матрице већ једнаких коефицијената, остаће једнаких и након квадрарања: 


(а О С НЕ 
а ђ а“ +ађ ађ+ђ2/ 


Ако множимо матрице једнаких коефицијената у резултату су једнаки коефицијенти: 


(4 а а реар 


Узмимо сада општији случај, матрице другог реда позитивних неједнаких у колонама: 


( 4) = (6.106 ПЕР 
ђ с ађ += 6с ђЂа+-+с2) 


па акоје О С с-а Са —ђ < 1, не губимо на општости када посматрамо разлику прве колоне: 
(а“ + а) – (ађ + с) = а(а –ђ) – (с—- а) < 
< а(а–—ђ) – Б(а –ђ) = (а –ђ): Са —ћ. 
Такође се смањује и разлика друге колоне: 
(ба + с) – (аа + са) = (с— а)с– (а – ја < 
< (а – ђ)с – (а – ђ)а = (а – В)(с—а) Тс-а. 


Дакле, разлика коефицијената унутар колона смањују се. Ако је она мања у првој колони, исто 
радимо са другом па првом. Коефицијенти по колонама теже ка једнаким, да се ситуација сведе 
на претходни случај. Наставимо ли са оваквим множењима, видећемо да у граничном случају 
добијамо матрице другог реда једнаких колона, када је 


16 Андреј Андрејевич Марков (1856 — 1922), руски математичар. 
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ђ 


ђ) =(а ђ). 


(р 4) (8 
а 
Резултат је вектор који не памти порекло, односно матрица је црна кутија. 


Ергодичка теорија (грч. Еруом егдоп „рад“, об60с ћодоз „пут“) грана је математике која проучава 
статистичка својства детерминистичких динамичких система; то је проучавање ергодичности. У 
„теорији информације“ која није детерминистичка, ергодичност ових канала има дубље значење. 
Ако постоје макар мале вероватноће да би сваки сигнал могао отићи којекуда, када би све такве 
биле као вероватноће канала К;; > 0, онда нема предугог памћења чак и када има веома дуге 


историје. 


На пример, космос који памтимо, чију прошлост форензичким или најбољим научним методама 
можемо „откривати“ и тако „реконструисати“, уопште не мора бити оно што је стварно било. Што 
старије то нетачније. Тако да би се и прича о „Великом праску“ (В8!5 Вап) могла оспоравати. 


Не морамо ићи тако далеко да приметимо конвергенције „објашњења“ догађаја које не зависе од 
онога што се заиста дешавало, колико од преносиоца „истине“. Ток до погрешне слике прошлости 
може доћи од намерне или олако прихваћене лажи, као и од заблуда. У датим околностима ту су 
и несхватљиве истине, а уосталом, математика нас учи да постоје и истине које су недоказиве (у 
оквиру дате теорије, датих знања). 


На сличан начин можда се тако може разумевати и понеки „синхроницитет“, појам који је смислио 
психолог Карл Густав Јунг за „безузрочну повезаност“, догађаја повезаних значењима без узрока, а 
које људи често сматрају коинциденцијама и сматрају их случајним. 


61.2. Ергодичка теорема 
Теорема 1. (Ергодичка) Ако је за неко т = 1,2,3, ... сваки елеменат матрице к" реда 5 строго 
позитиван, тада је за свако ] = 1,2,...,5 


Ја Ку(т) = а) 
где бројеви 4), који се називају граничне (финалне) вероватноће, не зависе од ! = 1,, ...,5. 


Доказ: Показаћемо да је пп К;) (п) монотоно неопадајућа функција од п, да је тах К,(п) 
[а [4 
монотоно нерастућа функција од п и да тах К,; (п) — ти К;(п) — 0. Тиме ће ова теорема бити 
[4 [4 


доказана на начин како је то урадио сам Марков. 


Полазећи од једначина Чепмен-Колмогорова имамо 
5 5 
Ку(т +1) = > Ка Ку(п) > пп кубу У. Ку = пп Куп). 
1=1 !=1 


Дакле, пп К; (п. + 1) => пип К, (т). Слично се оказује да је тах К; (п. + 1) < тахК; (п). Из 
[И [а [а [4 
Уј=1 Ку(т) = Уј-1 Ку(т) = 1, следи 
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5 5 
У кубт) – У Кубт) =21 + 25 = 0, 
ј=1 ј=1 
где смо разлику лево раставили на збир позитивних (2;)) и збир негативних (2;)) разлика. 
Према услову теореме сви су коефицијенти К; (т.) позитивни, па је 0 < тах 2,1 = а < 1. Даље је: 
ђ, 
тах Ку (т) – тах Ку (т) = тах[К, (т) – Ку (т)] < тах 2; = а. 
Џ ! 1Ј (А) 
Зап. = 1,2,3, ... је: 
тах К,(т +) – пајп Ка у(т +п) = 
1 


= тах[к Ст тј От п)] 


5 
= пах У Паг Ст) – ба(ту ка ј(т) < 
— ат=1 
< пах [24 тпах Кај (т) + 2 топ Кај (0 
- + . 
= тах (25 | пах Кај(п) – по Кај (|| 
=а: | пах Кој(т) – пп Кајбп)]. 
а а 
Одавде следи, за т = 1,2,3, ... је тах К; (тт) — па Ккуп)са о 0 ит 
[) 
Ергодичка теорема показује када вероватноће прелаза у великом броју корака не зависе од 


почетног стања. Да финалне вероватноће чине расподелу која је сопствена за дату (константну) 
матрицу канала видимо из следећих једначина: 


фар =4 
5 


4) = > акј, ј= И ПЕРЕ 
:=1 


Прву од једначина добијамо због 


5 5 5 
је је је 


а другу из једначина Чепмен-Колмогорова за т = 1, а затим преласком на лимес када п — со. 


Пример 2. Померање са одбијајућом баријером је периодична појава коју представљају матрице: 


_ 70107 ___ а 0 ђ 
К=|ја 0 ђ|, К>г=-Кп)=|0 1 0). 
0 10 а 0 ђ 
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Лако је доказати да је 


К, п=71,3,5,.. 


К" = Ке ~ 
(п) К2, п=>2,46,.. 


Нити за једно п. = 1,2,3, ... нису испуњени услови претходне (ергодичке) теореме. Вектор (0,1,0) се 
смењује са вектором (а, 0, ђ) у ланцу Маркова генерисаним матрицом К. 0 


Овде услови ергодичке теореме нису испуњени, јер сваки степен дате марице (К") имаће нула 
коефицијенте. У матрици ротације [59.] ни један коефицијент степеновањем не постаје нула, али 
увек је бар један негативан, па опет услови ергодичке теореме нису испуњени. 


Пример 3. Дата је матрица (5 = 3) случајног померања са простом баријером је: 


Д ђ а 0 Д Д ђ ађ а: 
К=|ђ 0 ај, К>=К(2)=|ђ2 гађ аз2 
0 ђ а ђ“ ађ а 


За ађ = 0 су испуњени ергодички услови. Гранична расподела д = (41, 02, д3) је сопствени вектор 
матрице К, такав да је 4 = ак, уз услов ај + 82 + аз = 1. Решавајући ове једначине добијамо: 


а2 


ђ2 а 
д2г = 7» дз = ја 


а а фађ+ 52 


Специјално, ако су вероватноће прелаза д1 = 42 = 1/2, тада су да = Ф%» = дз = 1/3. М 


Замислимо да пласман екипе А може бити прво, друго или треће место (податак еј, е; или ез) на 
неком спортском такмичењу и да се извештај о пласману екипе А преноси серијски. Нека спортски 
извештачи лажу (тј. Ка = 0,1 = 1,2,3), али не претерују (Ка = Ка, = 0) и нису пристрасни (у свим 
осталим случајевима К;, = сопзт.). У том случају имамо горњу матрицу канала за а = ђ. 


Према ергодичкој теореми ће коначни извештај о пласману, након много преноса у серији, бити 
једнако вероватан за за сваку од позиција (41 = 42 = дз = 1/3), независно од правог успеха екипе 
А. Након свих тих трансформација количина информација остаје иста, али њени садржаји биће 
препаковани у смисао који нема везе са почетним. 


жжж 


Укратко, тзв. ергодичка теорија важна је за „теорију информације“ којом се бавим. Ергодичка 
теорема говори о понашању копија од копија слика након дугих узастопних копирања, када, због 
макар и најмањих шанси за реализацију других опција, резултат сталних пресликавања поприма 
карактеристике канала уместо да личи на оригиналну поруку. 


На пример, усмена предања наратора историјских догађаја постајаће пре одраз карактера или 
жеља низа преносиоца него стварне некадашње истине. Еволуција живота тежиће адаптацији 
околишу све више, не марећи за почетни дизајн и задате намере (креатора, ванземаљаца, ДНК 
научника). Од ергодичке теореме не може побећи ни еволуција свемира. Ако је тачна поставка 
„теорије информације“ да постоји „објективна неизвесност“, тада је и тзв. „Велики прасак“ (В!5 
Вапг), којим је наводно пре око 13,8 милијарди година настала васиона, упитан. 
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61.3. Управљање каналом 

Оно што је мана у прилагођавању поруке преноснику постаје предност ако желимо управљати 
каналом. Довољно је разумети да канал треба толерисати опције и да порука тежи да постане 
његова сопствена. У овом случају ствари могу бити много лакше него у општем (ејвепместог). 


Пример 4. Знајући каква треба бити завршна расподела, рецимо д = (д1, 042, 43), формирамо 


константни канал генерисан матрицом 
41 42 43 
К =|Ф4 42 43 


41 42 43 


па ће за сваку расподелу вероватноћа р = (р1, 2, рз) резултат бити: 
Д Ф 2 93 
рк = (Ра рг Рз)|4 42 493'= 
Ф 42 43 
= ((ра + 02 + 1рз)да (Ра + 02 + р3)42 (Ра + 02 + р3)83) 
= (41 42 3) 
дакле, дата завршна расподела д. [0 


Срећом, за дату циљану коначну расподелу (вектор) постоје различити процеси (матрице) којима 
је она сопствена. Сопствених вектора 7 и матрица М, таквих да је УМ = 7, мноштва су. 


Пример 5. Када су х и у вероватноће неке расподеле (х у > их фу = 1,а0 < |а + 81 <1, 
онда се матрици К квадрирањем уједначавају колоне: 


ба = (578 ЈЕ х +ах – Ву +фав + а“ у—ах+вВу-—ав- аз 
х–В у+в х ах – Ву – ав – 22 у-—ах+вВу+ху+8%). 


јер је разлика коефицијената у првој колони 0 < (а + 8): < |а + В| < 1, а исто је и у другој. Обе у 
ретцима имају коефицијенте који су неке расподеле. Ако настављамо степеновање, К"—М када 
п — оо, па према ергодичкој теореми добијамо једнаке колоне и граничне матрице М. 


Приметите да обе следеће матрице, множена и резултат множења, имају једнаке коефицијенте у 
свакој од по две колоне 


( 2 у 4) = х= + ах – Ву +Фху у:+вВу-—ах+ух 
х у/лх—В У+В) |х:+ах—вВу+ху уг+вру—ах+ух]/ 


али да ни једна од њих не мора бити гранична матрица М. [9 


Међутим, алгебра, као и ергодичка теорија уче нас да не морамо бити тако радикални као у овим 
примерима да већ првим корацима будемо код циља. Посматрајмо проблем шире, као низ места 
М,, М;, Ма, ... тако да свако има следбеника и свако осим првог има претходника. У сваком од М, 

могуће је примити поруку Ху из М,_1 и проследити је у М, 1. Низ таквих порука Х), Х>, Ха, ... чини 


један Марковљев ланац. 
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Преносник порука из места М,_ у место М, је канал К,, такође. Вреди општи став [53. Теорема 1] 
а када је канал К,, исти за свако п = 1,2,3, ... тада кажемо да је Марковљев ланац хомоген. Када је 
вероватноћа пријема једне поруке х иста на сваком месту, тј. 


Ре(Х, = Х) = еопењ 


за свако п = 1,2,3, ..., тада кажемо да је Марковљев ланац стационаран. Да би ланац био хомоген 
он не мора бити стационаран, али се на њега односе последње четири теореме. 


Типични примери поменутих места Му, М;, Мз, ..., на којима можемо управљати вероватноћама 
појављивања одређених порука су низ РТВ релеја, низ новинских агенција које преписују текст, па 
и деца у игри „глувих телефона“ итд. Нетипични примери су наше свакодневне одлуке и поступци. 
Бирајући дејства прилагођавамо се свом текућем окружењу, али и обрнуто прилагођавамо околну 
себи. Сигнал се адаптира каналу, утврдили смо раније, али да се и канал адаптира сигналу, треба 
приметити. Бирајући шта ћемо радити, ми у толико малим нијансама мењамо велики свет около, 
да олако превиђамо свој шири утицај. 


61.4. Белманова једначина 

У свим тим узајамним утицајима, сигнала и канала, важе одговарајући закони „акције и реакције“. 
Што је већа количина (чит. маса) захваћених опција (дејстава), то је већа реакција (инертност, или 
отпор), то је већи повратни ефекат (мањег на веће). Многострукост је принципијелна особина ове 
теорије, а она се огледа и у различитости реакција. У том смислу је и изостајање интеракције, због 
чега сматрамо неће свако са сваким комуницирати. 


У неким је ситуацијама технички могуће поставити канале тако да вероватноће преноса К;; (;-те 
поруке у ј-ту) зависе од неког параметра 6, тј. К;; = К;) (5), којим се опет може управљати. У том 
случају онај који управља параметром 6 могао би на п-том месту (М,) повећати вероватноћу 
појаве унапред задате поруке упркос почетног податка. То је сложенији ниво управљања ланцем 
од простог избора константних матрица канала. 


Општи проблем таквог управљања састоји се у следећем. Наћи вредност параметра 
Сб (хот) 1 1,2... те т==а 


као функције корака (места) т и поруке х; на том тако да са највећом вероватноћом на п-том 
кораку имамо поруке 


пр Ту Пуни | 
Функција 5 = 2(Х; т) зове се функција одлучивања, а она вредност функције ко = 2(,, т) за коју 


рд = тах Рог ет) ге ће 


је функција максималног одлучивања. 


Означимо са Ру (Х;) вероватноћу да се сигнал х; појавио у т-том кораку. Претпоставка је да ове 
вероватноће зависе од функције одлучивања 5. На основу формула потпуне вероватноће имамо 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


Вибо) = У у Рана). 
ј 


Одавде се добија тзв. Белманова (Ве тап) једначина 


РО(х;) = пах У ЈЕ) Рина ја ЊЕ с те А те. 
Ј 


Када за т. + 1 корак нађемо 66 т + 1)и Ра) Белманова једначина показује како се за 


претходни, т-ти корак одређује Бо (хут). 


Ако је оператер параметра 6 јединствен тада још увек можемо имати Марковљев ланац. Међутим, 
када свако од места М, канала управља параметрима следећег, онда више не морамо имати 
ланац са меморијом првог реда. Такав ланац није Марковљев, а његови генератори (канали) могу 
имати меморију. 


Знамо да се свака матрица може раставити на неке факторе, К = АВ, на производе матрица од 
којих свака може бити врста канала, а то на више начина. Штавише, јединичне матрице се такође 
тако растављају, од производа инверзних матрица, преко идепотентних, па до цикличних попут 
ротације, рецимо за угао 609 чији ће сваки шести степен (п Х 6 х 60" = п х 360") бити јединична 
матрица. Да такви производи могу бити растављиви у независне факторе говоре нам разни знани 
примери око нас, а за крај навешћу и следећи који је нетипичан. 


Пример 6. Тело ротира око центра гравитације мењајући вектор брзине. Интензитет брзине редом 
се смењује са већом (перихел) и мањом (афел) док тело прати елипсу, да би пуна револуција тела 
била праћена једном пуно ротацијом (3609) смера брзине. О тој усклађености говоре нам теореме 
доказиване раније (Прилози, Централно кретање | и |), да централне константне силе опадају са 
квадратима удаљености и да покрећу набоје по коникама (елипсе, параболе, хиперболе), ако им 
се дејства шире брзином светлости. 


Другим речима, исте усклађености нема у прејаким гравитационим пољима у центрима галаксија, 
или рецимо Меркура због близине Сунца – чији перихел (велика оса елипсе) такође кружи током 
Меркурових обилазака. Ајнштајнова општа теорија релативности коначно је објаснила аномалију 
закривљењем простора времена, а иста је изведива из принципа најмањег дејства (Минимализам 
Информације, Ајнштајнове опште једначине), па је онда:!' објашњива и „информатички“. 


Наиме, за разлику од других сила, гравитациона продире кроз слојеве времена. То је веома слаб 
утицај „простора који памти“ (300 милиона пута, па и на квадрат, пута слабији), али који долази до 
изражаја у средини веома јаког поља. Довољно да наруши опадање са квадратом удаљености те 
силе и, доследно томе, кретање по коникама набоја на које делује (в. такође АСС 114905). 0 


7 Принцип најмањег дејства, принцип најмање информације и највеће вероватноће – еквиваленти су у 


(мојој, још увек незваночној) „теорији информације“. 
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М! Део: Процеси 

Када говоримо о „стохастичком процесу“ то значи да имамо неки систем и запажања у одређеним 
временима, а да је исход, односно посматрана вредност у сваком тренутку случајна променљива. 
Стохастички процес је колекција или скуп случајних променљивих индексираних променљивом 7, 
која обично представља време. 


Многима стохастичким процесима просечна својства независна су од тога где су формирани дуж 
временске осе. На пример, средња вредност може бити независна од [. Још једно важно својство 
неких стохастичких процеса је „ергодичност“, што значи да се просеци вредности неког одређеног 
времена попут Е [] (Е)], могу заменити просеком током времена на било којој функцији ј (до, 2) из 
стохастичког ансамбла (са фиксним џи). Другим речима, стохастички процес има ергодички режим 
ако је просек опсервабилног ансамбла једнак временском просеку. У таквом режиму, сваки скуп 
насумичних узорака из процеса мора представљати просечна статистичка својства целог режима. 


Међу најважније спадају „максимални“, који носе највећу информацију. У случају ограничености 
на коначан распон исхода таква је једнолика расподела вероватноћа, у случају датог очекивања то 
је експоненцијална расподела, а у случају дате дисперзије то је нормална расподела. Занимљиво 
је да су најинформативнији канали преноса у неком смислу увек попут „црне кутије“, а да природа 
настоји правити отклон од таквих – због принципијелног минимализма информације. Резултат је 
пад обима опција, уређеност, јасноћа, памћење. 


Тако можемо разумети „чудне“ резултате анализе фреквенције слова у текстовима, разних азбука, 
језика, од мање до више смислених садржаја. Корак од тога је схватање закона великих бројева, 
па чак и Дирихлеовог принципа, начином (моје) теорије информације. 
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62. Марковљеви процеси 

Уопште говорећи, процес је промена која се догађа под утицајем времена. Марковљев процес је 
случајни ток зависан од времена са особином да је будућност независна од прошлости, с обзиром 
на садашњост. Сматра се стохастичком аналогијом диференцијалним једначинама и рекурентним 
односима. 


Када је временска променљива Марковљевих процеса дискретна, Е# Е М, називамо их дискретним 

временским Марковљевим ланцима. Њихове претежне алатке су основе вероватноће и линеарна 

алгебра, а понешто новога наћи ћете у мојој књизи „Физичка информација“, нарочито у одељцима 
о случајним корацима. Али, када је простор дискретан и време непрекидно, : Е [0, со), уместо тог 

назива, боље им стоји назив ланци Макрова непрекидног времена. Својство Маркова, да се стања 
не памте, имплицира да процес има експоненцијалну расподелу (Метогу!ез5 Ргорегу). Пуасонов 

процес је типичан пример ланца Маркова са континуираним временом. 


Нека је п скуп елементарних догађаја, а Е непрекидни параметар. Стохастички процес дефинише 
се као функција два аргумента 


Е(0) = 2(Х,1), хеп. 


За сваку вредност параметра | је ф(х, 2) је функција од х и случајна променљива. За сваки фиксан 
догађај х, функција ф(х, Е) зависи само од | и назива се реализација стохастичког процеса С(#). То 
је формулација стохастичких процеса два руска математичара, А. Х. Колмогорова и А. Хинчина, око 
1930. године у нализама хомогених промена које се од тада називају Марковљеви процеси. 


Непосредну везу процеса и преноса података добијамо када кораке Марковљевог ланца задамо 
стањима у низу временских тренутака. Тада је низ случајних променљивих Х], Х, ..., редом ознаке 
Х(6),Х (5), ..., низ стања једне поруке, Х = х, на излазима из серије канала, која се дешавају у 
тренуцима 51, 5, .... Другим речима, почетна порука Х (60) = Хо након п-тог канала је Х (1) = Х,. 
Таква интерпретација је пожељна када радимо са великим бројевима п. Е М и када се намеће да 
скуп (6, ) посматрамо као приближно непрекидан. 


Друго ограничење теорија процеса поставља код почетних услова. Када претпоставимо да је скуп 
елементарних догађаја пл коначан (комада 5), тада имамо коначну матрицу канала К(Д) реда 5 
која генерише хомоген Марковљев ланац. Даље претпостављамо да је ова матрица приближно 
јединична, у смислу да је 

Ји К(АО) = 

Аг—0 
тј. Кку(0) = би за свако 1] = 1,...,5. Када ставимо [ = 0 за почетно време, онда је овај лимес 
оправдано назвати почетни услов. Показује се да је он довољан да сви коефицијенти К;; као 
функције параметра, времена :, буду непрекидни по том параметру. 


Када је време потребно сигналу за један корак ДЕ, дакле за пролазак кроз само један канал, тада 
за п корака ланца сигналу треба Е = п · Д; времена. Производ п претходних стохастичких матрица 
опет је нека стохастичка матрица: 


К(е) = Кап де) = [КА )]. 
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Посебно је: 
КО +А ) = КО КАО = КАО · КО. 


Означимо са р(АС) = К(Д0) – 1. Ово је опет матрица реда 5, али није стохастичка. Лако се уверити 
да је збир коефицијената произвољног ретка ове матрице нула. Интуитивно матрицу Д можемо 
схватити као матрицу преноса дезинформација. Наиме, она има само оне коефицијенте канала 
непромењене који :-ту поруку преносе у другачију ]-ту. 


Одузимањем горње једнакости добијамо: 
КЕ +А О КО) = КОЈ· Р(ДО = р(АО · КО. 


Како су ове матрице коначног реда 5, због горе наведеног почетног услова, разлика на левој 
страни једнакости тежи нули када ДЕ — 0. Другим речима, сви коефицијенти су непрекидни по 
параметру Е. 


За тако велике бројеве п, када параметар : постаје приближно непрекидан, матрица Р постаје 
нула матрица и стога бескорисна. Зато уводимо и матрицу густина дезинформација 


~ _ ОДО) 
ЛА = Шт У 
Ано ДЕ 


Лако је проверити да су коефицијенти ове матрице (747) константе такве да је 


5 
7 ТЕ = 0 
ј=1 


за свако ! = 1,....,5. Обратно, ако је збир сваког ретка матрице А нула, тада је и збир сваког ретка 
матрице О нула, те је матрица К(20) = Р(АС) + 1 стохастичка. 


Полазећи од горњих једнакости и дефиниције матрице ИЧ добијамо: 


ак() _ паре за ние 
5 = КОЛ = Ал -К(0). 


То су матричне диференцијалне једначине Колмогорова за процес са коначно много стања. Овде 
су то и диференцијалне једначине дуге серије канала, коначног реда 5. 


Пример 1. Када је матрица неког канала (у произвољно блиској тачки : = 0) тачно јединична, тада 
је В нула матрица, а таква је и матрица густина Л. Дакле, Лу = 0 за свако 1,] = 1,...,5, па се горња 


: аку(е) 
једнакост своди на —-=— = 0 


К(Е) = 1, са произвољним : > 0. 0 


„или Куј(Е) = сопз!. Узимајући у обзир почетне услове, то значи да је 


Мало сложенији случај од овог примера је бинарна (квадратна, другог реда) матрица густина Л. 
Да би она била добро дефинисана довољно је да 112 = — а] И Х21 = —1 22. Отуда де: Л = 0. 


Покажимо да матрица Л једнозначно дефинише процес канала К. Претходна једначина је 
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= ( Ку Ку; ) 5 ( Ку Ку; ) ( Ку Пн 
ДЕМ— Ка 1— Ку 1— Ку 1— Ко] — А; – Хог 
што се може краће написати 
ки = Ола + А 2)ку + (десл)к) = 0. 
Детерминанта у последњој загради је нула, па имамо хомогене диференцијалне једначине другог 
реда са константним коефицијентима чије је опште решење 
— еа)„— (2) 

Ке) = С е 1 + С % 

где је стављено 741 + 122 = —а. 


(1 


2 , | 
Четири пара константи С Ји с! ) одређујемо прво из почетних услова и захтева да добијемо 


стохастичку матрицу. Ако је а < 0, добијамо одмах К (() = [. Акоје а > 0, тј. Ха1 + А 22 < 0, биће 


[) 


Кку(0) = с + се = 8,). Отуда опште решење 


[) 


Ке) = буј и па = 6), 
где имамо четири непознате константе (у) (1, ] = 1,2) и познату константу а = — 1 — А22 > 0. 
Како је: 
Ка + Кр = 1— (Са + Ср)а Ке“) =1 


то је Са + Сб = 0 за оба ! = 1,2. Последње једнакости смањују број непознатих константи на две 
Су и С»: 


- =1—(С(1–е"%) К(Е) = С] –е“") 
Ка (1) = С(1—е“") К;2(#) = 1– С(1—е"%) 


Изводи ових коефицијената по (, у тачки ! = 0, дају коефицијенте матрице Л. Тако упоређивањем 
коначно добијамо: 


ћ, ћ, 
(права -- прршња НН- = 
Ка + 2 Ка + 22 
а тиме и опште, а видимо и јединствено решење за К (6) матрице другог реда. 
У специјалном случају, када је Х11 = 22 = —% имамо бинарну симетричну матрицу канала 


1 + Ра: 1— 072 


== 2 2 
40 — 1= Ра: 1 + 072 : 
2 2 


где је 7. > 0. Описани и класични Марковљеви процеси разликују се само у интерпретацији. 


Помоћу хиперболног [04.] косинуса и синуса: 
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ову матрицу канала пишемо 


Бе _ ме ЕСћЋА ЗЛЕ 
Крј-е (о: Ле 


па је можемо разумети и као хиперболну ротацију. 


На слици лево је хипербола (Нуретоћ с ЕипсПопо) 

Ж = у“ = 
у Декартовом правоуглом систему координата (ОХУ), са 
потегом ОК из исходишта до тачке К(сћ С, 5ћ 6), при чему 
је овај параметар # = 25 двостука шрафирана површина, 
унутар криволинијског троугла 600 (између хиперболе, 
апсцисе и потега). 


Када параметар неограничено расте (1 — со), тада потег 
постаје асимптота ове хиперболе, једначине праве у = х, 
а шрафирана површина достиже свој максимум (5 — 1/2). 
Тада дата матрица канала конвергира црној кутији 

за 1/2 1/2 

К(Е) > 2 12) ХЕ — со. 
Условне вероватноће канала постају такве (К;; = 1/2) да 
је информација максимална. Приметимо да је то у складу 
са запажањем овде [53. Теорема 1. и даље] да сметњама 
канал не губи информацију, већ нас само дезинформише додавањем сопственог шума. 


Почетна информација се низом канала гуши, дезинтегрише или рецимом препакива, добивајући 
постепено нове детаље, тако да за крајњег читаоца изворна постаје све тежа за декодирати и бива 
коначно „изгубљена“. Када канал постане максимално оптерећен информацијом, када му условне 
вероватноће све постану једнако вероватне (овде су то К;; = 1/2 за све !,] = 1,2) нема даље. 
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63. Домет сигнала 

Када се у неком кораку хомогеног Марковљевог ланца појави сигнал који је повратан (поновљен, 
тачно једнак), онда се може очекивати да ће се сваких коначно много корака појављивати исти 
сигнал. Важи и обрнуто, ако се у неком кораку хомогеног Марковљевог ланца појави сигнал који 
није повратан, онда очекујемо да ће се тај сигнал у остатку ланца јавити највише коначно много 
пута [59. Периодични сигналиј. 


Када је бар један сигнал повратан, повратни су сви и пренос информација каналом К = [ке | је 
периодичан, а бар нека од условних вероватноћа К;; није строго позитиван број. Обрнуто, када 
бар један од сигнала није повратан, канал није периодичан и сви његови коефицијенти су строго 
позитивни бројеви (К;; > 0, за све !,] = 1,...,5), а улазна информација (расподела) конвергира 
својственој канала, док канал постаје црна кутија [61.2. Ергодичка теоремај. 


Пример 1. Матрица ротације за угао 6 = 2п1/п генерише периодичан канал 


2п . 2п 
5 с05 | Е 51 тлу 
= 2п 2п 


311 —— = со5— 
п п 


периода п = 1,2,3, ... корака. Наиме, након п корака добијамо: 


2л „ЗЕТА 
р" = шет Мо ( 2п — 5т 4 – (| ) 
2п 2гп чЧп2п  соз2л 01 


зП1— = со5з— 
п п 
а то је идентичка трансформација. []] 


Ротација за угао 0 = 2п/п, где п 6 М, пример је „прикривања“ информације да би се појавила у 
изворном облику сваких п корака, ако је пренос информације периодичан. У том случају, коначног 
губитка информације нема, а у свакој некој (п-тој) трансформацији стохастички канал садржи по 
једну јединицу и све остале нуле. Таква матрица канала имаће инверзну, за разлику од матрица 
које имају детерминанту различиту од нуле, али се на основу примљених не могу са сигурношћу 
дешифровати послати сигнали [08.]. 


Међутим, теорија информације на којој овде радимо не подразумева постојање апсолутних нула 
вероватноћа, сумња у такве, па доследно очекујемо да су „периодичне“ појаве у том смислу само 
приближно повратне. Тако светлост која нам стиже из далеких галаксија, долази из прошлости нај 
даље неких 13 милијарди година. Из мало ближе прошлости видимо је са „црвеним помаком“ јер 
потиче са места која беже од нас то брже што су даља, односно што су старија. Још ближа светлост 
око нас одбија се, прелама или стапа са околним објектима, тако да њене осцилације опет не трају 
неограничено. 


Експериментални доказ вечности физичке појаве немогућ је и, према томе, претпоставка да нема 
апсолутних нула условних вероватноћа евентуалних матрица канала прихватљива је. Она је у овој 
теорији подржана и претпоставком да је информација ткиво простора, времена и материје, а да је 
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Тако гледајући, честица-талас (светлост) која допутује до нас кроз огромна пространства космоса 
нека је информација. Само њено путовање такође је информација, па се отвара питање и о успут 
насталој информацији трајекторије, о додатној и „наталоженој“ негде другде, ако већ честица не 
постаје све већа и већа на свом путу него напротив губи енеригију:. Али то има даље занимљиве 
импликације. 


Доплеров ефекат удаљавања далеких галаксија може се посматрати и кроз ергодичку теорему, да 
преносом кроз низ канала информација постаје све више „својствена" (ејвеп, тј. карактеристична) 
каналу, на уштрб оригиналне. Ми зато никаквим експериментима нити новим научним знањима 
можда нећемо моћи засигурно утврдити да је „Велики прасак" (В!5 Вапг) заиста постојао, или шта 
је тачно било пре тих 13,8 милијарди година. Пад фреквенције светлости „извора који се удаљава" 
можда је просто још једна од последица ергодичке теореме [61.2.). 


Путујући кроз низ канала, оригинална информација обогаћује се шумом. То постаје сметња њеном 
читању на начин као што пласт сена може сакрити иглу, или као што би 
додавањем до свих седам цртица дигиталних бројева на овом сату сви 
постали број 8 и тако „обогатили“ приказ да би он постао неразумљив. 


Са мањком информације нисмо информисани, а са вишком смо дезинформисани – неко је давно 
приметио. 


Сама „ергодичка теорема“ ипак се може третирати и као последица „принципа најмањег дејства" 
информације, односно чешће „реализације вероватнијих исхода“ а мање информативних таквих. 
Наиме, она кроз канале тежи мањим променама, вишак информације настао преносом уједно је 
вишак дејства (дејство, производ настале енергије и при томе потрошеног времена, еквивалент је 
информацији), које се затим може дати околини путем познатих физичких интеракција. То рецимо 
значи да нама познато загревање преносника информација (радио, ТВ, телефон, компјутер) неће 
бити последица само трошења енергије потребног за покретање уређаја, већ је ту и загревање од 
протока информација. Где то дејство одлази, ако фотон путује вакуумом – ново је питање. 


Додатно, обзиром да се фермиони могу распадати у бозоне и обрнуто, честице-таласи супстанце 
обострано у одговарајуће простора, ако су први преласци у просеку мало вероватнији од других, 
то је разлог плус да буде све више простора у све ређој супстанци васионе. На тај начин ширење 
свемира може, уз све претходно речено, бити и објективна појава. 


Такође, ако „простор памти“ на описане начине, онда због закона одржања и ставова да систем са 
све већом ентропијом има све мању информацију (Ентропија), да се други закон термодинамике и 
уопште спонтаног раста ентропије, односи само на супстанцу, а не и на простор. Сва информација 
је сачувана у збиру и након „топљења“ супстанце у простор, она остаје константна у својој укупној 
количини садашњости и сећања, а за ентропију не важи закон одржања. 


Моја теорија информације озбиљно узима и гравитационо деловање прошлости на садашњост, са 
смањеним дометом око 300 милиона пута па на квадрат (због временске координате 1с1), у истом 
систему физичких мера (метар, килограм, секунда). Тако разумемо повлачење простора за масом 
у јаком гравитационом пољу, рецимо померања напред перихела Меркура у ротацији око Сунца, 


18 Светлост губи фреквенцију, сматра се због Доплеровог ефекта извора који се удаљавају. 
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па и присуства тамне материје у галаксијама које нису изузетно ретке (АСС 114905). Тиме поново 
стижемо на питање домета утицаја, али сада и прошлости на садашњост, па и на „домет канала“. 


63.1. Грешке копирања 

Процена је да се грешка у копирању једног бита деси отприлике једном на сваких 74 ТВ података. 
Терабајт (ТВ) је јединица дигиталних података која износи око трилион бајтова. Тачније, 1 ТВ је 27, 
или 1099 511 627 776 бајтова, а један бајт је 8 бита. То је грешка која се дешава и мање од двапут 

месечно у просечном раду кућног компјутера. 


Зато сервери користе ЕСС (Еггог СоггесПоп Соде) меморије. Систем са таквом меморијом типично 
препознаје једнобитну грешку, тако што уместо 8-битног бајта користи 9-битни, где девету цифру, 
0 или 1, аутоматски додаје тако да је број јединица улазног бајта рецимо паран. Ако се тај паритет 
наруши, постоји грешка копирања. Затим се користе даљи начини откривања детаља и исправке 
грешке, или се тражи ново учитавање сумњивог податка. Шансе грешке се тим поступно смањују, 
увек по цену трошења меморије и времена, али не исчезавају у потпуности. 


Пренос информације кроз дуге серије канала може се посматрати и тако, као узастопно копирање 
копија. Статистика ће се на крају задовољити вероватноћама појаве сигнала, нарочито ако их има 
на сваком делу дуге серије. Таква вероватноћа (р) је функција неког параметра (;), који опет може 
довољно тачно представљати и дужину проводника. Низ вероватноћа улазне расподеле, р = р(0), 
усредњава се експоненцијалним брзином у интервалу (0, 2) када 1 расте од 0 до со, постају такве 
које канал више не мења (својствене), сагласно начелном минимализму промене информације, а 
канал постаје црна кутија (за полазну информацију). 


Пример 2. Опште решење једначина Колмогорова за бинарну симетричну матрицу канала је 


1 + Ра: 1 — 072 


и 2 2 
Ко) ИЕ 1 Ра: 1 + 072 Џ 
2 2 


= = 11 
што значи да оригинална расподела р) = (Ху, Ур), постепено прелази у расподелу Ро = (=) =/ при 
томе се прва (већа) вероватноћа смањује експоненцијалном брзином, а друга (мања) истом расте. 
У том граничном случају, сваки вектор постаје Ро, јер је: 


~ О —_ 1/2 1/2 | Хо + Ур Хо + Ур = 1 1 а 
рок = бо уд (12 172) = (75 пер) = (5 2) = 


без обзира какав је улазни вектор. [] 


У општем случају, претпоставка је да :-та порука послата мрежом, у тренутку # = 0, припада неком 
случајном скупу са расподелом р = (р1, ..., Ро), где је р; вероватноћа да се на улазу појави баш :-та 
порука. Након времена : > 0, вероватноћа да ћемо примити ]-ту поруку је 
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5 
"ПОЈ = У риикб, ј = 1, пак 9 
!=1 


Ергодичка теорема за Марковљеве ланце даје финалне вероватноће 
" | 
> = т а((Е 
ај = ит а(0) 
. ја ж ж Р 
за ] = 1,...,5 и финалну расподелу д“ = (41, ..., 4; ) која може бити битно различита од почетне 
расподеле р. Уместо да поново решавамо диференцијалну једначину Колмогорова, сада матрице 


реда 5, погледајмо мало другачији пример, који показује да је иста зависност од сметњих излазне 
расподеле као и врсте канала. 


Пример 3. За канал К (0) када је 41) = рК (0), у општем случају за ј-ту колону, опет помоћу 
диференцијалних једначина Колмогорова налазимо: 


дао) ~> ак 
> то оХ Кудај = У ако 


1=1 


44) _ 


= а ЈА 


уз почетни услов 4(0) = р. Дакле исту зависност од параметра сметњи Ћ има излазна расподела 
као и врста канала К(). Без обзира како дефинисали домет, сасвим је сигурно да се он значајно 
повећава када свако 1) — 0 (1 = ]). О) 


Због оволике важности канала у преносу поркука, корисно је да се сваки део водича састоји од 
канала преноса информације што је могуће приближније форме јединичне матрице, а да кдд који 
се преноси буде коначне азбуке. Овај други услов потребан је процесима Маркова, непосредним 
интерпретацијама ланаца Маркова, а занимљиво је да се може једнако примењивати и на ручно 
копирање дигиталних података са једне меморије на другу. 


63.2. Препорука 
Услов да сметња у проводнику не зависи од сигнала којег проводник носи може се записати 


= |“ = Је Тј] 


Х, [ЕЈ] 
По дефиницији је 
Кк; (ДЕ 
Хх = Шт (80) 
Ано _ ДЕ 


те је 7 > 0. Константа 7. представља густину вероватноће да ће произвољан :-ти сигнал, док прође 
кроз врло мали део проводника, изаћи као другачији ј-ти сигнал. У савременој техници преноса је 
7. > 0 врло мали број. 


Сабирци са десне стране једначина Колмогорова сада су сви множени истим бројем 7, сем једног. 


Лако је проверити да се те једначине своде на: 
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ак; (6) 
а; 


+ 5745) = Х 


уз почетни услов 4(0) = р. То је линеарна диференцијална једначина првог реда са константним 
коефицијентима. Њено опште решење је 


1 
410) = -+ а ла и 


где су С; = рј – 1/5 константе одређене почетним условима. Када !  оо, тада 4/(6) > 4) =-<4178. 
Према томе, формалне вероватноће имају расподелу са максималном информацијом. У реалним 
условима ове су промене далеко повољније. 


Због неједнакости ех > 1 + х, биће –е “57 < —(1 — 5721), тј. 
|ру – а | < М|1 – 50 
за свако Ј = 1,...,5. Какоје 0 < р, < 1, добијамо даље 
О<р) – 47600] < |5– 1%. 


Коефицијент (7,;;) уз Е представља густину вероватноће грешке при преносу сигнала на основном 
делу проводника. Претпостављамо да је тај број врло мали. Брзине преноса сигнала могу бити 
толико велике (блиске брзини светлости) да је укупно време : врло мало. Време обиласка сигнала 
око земљине кугле, на пример, је мање од једне секунде. 


Према овим релацијама имамо следећу препоруку за повећање домета, или што је исто, за бољи 
пренос података: 


а) Бирати преносник веће брзине; 
6) Смањити техничке сметње 7; 
с) Смањити дужину кода 5. 


Последњи услов (с) јесте, али не толико битан колико на први поглед изгледа. У случају велике 
дужине кода, 5, само мали број од свих сигнала се преноси са вероватноћом већом од нуле. Да 
није тако било би практично немогуће пренети поруку са непрекидном расподелом. 


63.3. Неограничена азбука 

Када број слова кодне азбуке 5 — со, проблематици можемо прићи са другачије стране. Означимо 
са Е (х, 2) вероватноћу да је сигнал п прешао пут х за време [. Претпоставимо да је са места х = 0 
у тренутку Е = 0 послат сигнал л. Тада су почетни услови 

х=0 


% 
КО) = о х=0 


Ма како била велика брзина У медија који преноси поруку, свакако је У < +со. Отуда други, доњи 
од услова. 


Претпоставимо даље да је р вероватноћа да ће сигнал л прећи пут ћ за време т. Онда је 1 — р 
вероватноћа да се п неће појавити на излазу, па је према формулама потпуне вероватноће: 
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аи = >РЕ(х —ћЕ) + (1—Рр)Е(Х,2) 
Е(Х += ЊЕ) = РЕ(Х,Е —т) + (1 —РрЈЕ(Х,2) 


Одузимањем добијамо: 


(ван ок ко 
Е(Х +,10) — Е(Х,1) = рјЕ ДЕ —т) – Е(Х,2)] 


На основу Тејлорове формуле је: 


Р дЕ(х, 0)  1ОЗЕ(Х, 1) 


Е(х—ћ,1) — Е(%Е) = – 37 та о(ћ2), 
Е(хЕ —т) — Е(Е) = – = 3. о(т), 
Б(а,Е +7) – РО) = + = У лаб) 

па у ври 


дх 2 дх2 


Сменом у претходним једнакостима добијамо: 


2 де ВФЕ па 
Пе И дана а 
де ООЗЕ 


ет — + — ЕР == #0013) = р|- г52 #60). 


За велике брзине У је т толико мање од ћ да остаци о(т) и о(ћ2) када ( — 0, постају једнако 
занемарљиви. Додатно са ћ = Ут, где је У брзина сигнала, налазимо: 


дЕ(Х, 1) дЕ(х, 6) рућдгЕ(х,6) 
де ~ > дх Ј. 20 ох2 ' 
дЕ (Х, )_ рде(х 0) УЋОЗЕ(Х, 22 
дх У де 2 одх: 


Добили смо парцијалне диференцијалне једначине попут Планк-Фокнерових за хаотично кретање 
честица гаса, или једначинама Колмогорова за случајне процесе непрекидне расподеле. 


У првој једначини је вероватноћа да ће сигнал (л) прећи пут ћ, а у другој да ће након времена т то 
остати исти сигнал тп. Због уграђеног услова, брзине сигнала У = Л/т, можемо претпоставити да су 
те вероватноће једнаке, чак и ако је р = р(х) и У = У (х). За разлику од Планкове једначине где је 
приближно р = 1/2, овде има смисла претпоставка да је приближно р = 1. 


Када је р = 1 сабирањем добијамо 


дЕ(Х, 2 „Ре 0 _ 
дЕ дх 
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Решење ове диференцијалне једначине је свака диференцијабилна функција Е (х, Е) = Ј (УЕ — х), 
где је [ (0) = 1,7 (-х) = 0 (х > 0), због почетних услова. Према томе, максимална вероватноћа 
Е (х, 2) = 1 је достигнута у свакој тачки у којој је х = УГ. Домет сигнала је неограничен. 


Када је р = 1 — 2, где је 2 > 0) веома мали број, биће приближно = = 1 + г па одузимањем 


О ИК 6) А 20) _ 
дх2 ћодх | 


а отуда 


де, Е) 


Е 
–та + РС 6) = соп5!. 


Јасно је зашто десна страна последње једнакости не зависи од х. Међутим, према претпоставци 
(х = УЕ) она није нити функција од Е. Почетни услов Е(х, 0) = 0 даље тражи да ова константа буде 
нула. Зато је опште решење задње једначине КЕ (х, 1) = С · ехр(—2х/ћ), што због почетног услова 
(0,0) = 1 даје константу С = 1. Тако, вероватноћа да 
ће сигнал л достићи тачку х износи 


ри = 
Е(х Е) =е 1. 
Затим, помоћу неједнакости е“ > 1 + х добијамо 


< |1 <= 
(2 от 


Дакле, домет сигнала се смањује када се „сметња“ = 
повећава док смањивање х (или т) не утиче толико на 
домет јер се тада смањује и г (р = 1 —г). 


[Е] 


63.4. Аналогије 

Горња функција ЕР = Е(х, 2) даје вероватноће да ће сигнал л прелазити путеве х за времена [. 
Вероватноћа р је њен посебан случај, да ће сигнал пл прећи пут Л за време т, даклер = Е(Т,т),а 
2г = 1 —р је вероватноћа да се пл неће појавити на излазу. Општије, 1 — Е (х, 6) је вероватноћа да 
сигнал није прешао пут х за време (. 


Међутим, ако је Е = ехр(—2х/ћ) вероватноћа, онда је гх/ћ = — 1п Е нека информација. Обзиром 
да су 2 и ћ константе, то ова информација зависи само од х, односно од вероватноће Е = Е(х, 1) 
да сигнал п пређе пут х за време (. Ако 2гх/ћ видимо као Хартлијеву информацију (логаритам 
једнако вероватних исхода), онда нам је Е мноштво неких (апстрактних) уједначених исхода. 
Затим се намеће питање поопштења на комплексне бројеве. 


Отуда аналогија функције Р (х, 6) са таласном функцијом Ч(Х, Е), иначе решењем Шредингерове 
једначине за честицу-талас квантне механике, има основе. Посебно, за слободну честицу биће 


у (х, 9) == Докх-ЕОЉЋ 


где је А константа нормирања вероватноће, за имагинарну јединицу важи једнакост 12 = —1, 
таласни број К = У2теЕ /ћ, енергија честице Е = тс“, а ћ је Планкова редукована константа. 
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Решење Шредингерове једначине за основно стање погледајте у мојој књизи „Квантна Механика“ 
(Пример 1.4.5.). Добија се 


и К- Хо) + о“ 2К- Хо) 


бо) = МЕ > 


у тачки Хр. Слична су и решења „потенцијалног прага“ (1.4.6 Потенцијалне препреке) када честица 
пролази интервалима апсцисе, први х < 0, други х Е [0,а] итрећи х > а, различитих константних 
потенцијала као препрека 


(с) = Ае!“ + Ве“ 2, 


где константе А и В, као и одговарајући таласни број К, зависе само од дате три позиције честице 
на апсциси. 


Знамо да експоненцијалној расподели вероватноћа теже дискретни процеси попут Бернулијевих, 
рецимо бацања новчића – где исход следећег не зависи од претходног. У такве спадају и процеси 
Маркова, стохастички модели који описују догађаје са вероватноћама сваког од њих независима 
од претходних стања. Исти модел независности довољно важи и за таласе-честице које налазимо 
у решењима Шредингерове једначине. Куда год да такве честице иду, форма и вероватноће остају 
им једнаке. Све су то ситуације експоненцијалних расподела аналогних по „непамћењу“. 
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64. Без памћења 

Бацање новчића типичан је пример расподеле вероватноће без меморије. У сваком том бацању су 
шансе да падне „писмо“ (вероватноће 0 < р < 1) или „глава“ (вероватноће д = 1 — р) константне, 
без обзира шта је пре било (у случају фер новчића р = а = 1/2). 


Сличан пример су независни кварови машина. Када израчунавамо вероватноћу квара (независног, 
новог) уређаја често није важно колико се хардвер кварио раније. Вероватноћа да ће отказати пар 
минута од сада не зависи од чињенице да се није кварио два месеца. Такође ће наилазак купаца у 
продавницу бити „безмеморијски“, када сазнање о уласку последњег од њих не помаже, а купци 
су неповезани, са индивидуалним понашањем. 


За дистрибуцију вероватноће у статистици се каже да има својство без меморије када вероватноћа 
будућег догађаја не зависи од појаве прошлих. Дистрибуција вероватноћа без памћења углавном 


је експоненцијална, затим геометријска са природним бројевима, међу које спада и Вејбулова. 


На слици десно су три графа, експоненцијалне 
функције 

у .“3х 
са параметрима а = 1/2,а = 1Тиа = 2, редом 
горњи црвен, средњи зелен и доњи плав. Како 
је извод ових функција, у' = —ау, то се нагиб 
(однос промене ординате променом апсцисе) 
мења сразмерно ординати, тј. вероватноћа се 


мења сразмерно вероватноћи. 


Још једну занимљиву особину експоненцијалних расподела видели смо у наслову „Ограничења“ 
[41. Теорема 1. 1.]: Нека је дата густина вероватноће /(х) са непрекидном реалном варијаблом х. 
Ако је [ (х) = О за х < 0 и ако постоји коначно очекивање и тада постоји и информација за коју важи 
5 <!ов(еџ), при чему једнакост вреди ако и само ако ј има експоненцијалну расподелу. 


Формално кажемо да случајна променљива Х прати расподелу вероватноће са својством да је без 
меморије, ако је за било које т и п из (0, 1,2, ...) важи 


Рг(Х > т +ФтХ >= т) = Рг(Х > п). 


Другим речима, ако смо имали т = 10 покушаја без успеха, вероватноћа да ћемо морати чекати 
до 30. покушаја или већег да бисмо доживели успех је иста као вероватноћа да почнемо од нуле и 
имамо 20 неуспелих покушаја или више до повољног исхода. 


Сигнал л који наилази на датом месту (апсцисе х > 0) у датом тренутку (: > 0), са вероватноћом 

КЕ (х, СЕ), било да је слово неког дугачког текста (књиге), као и реч изговорена током подужег радио 
програма, или аутомобил одређене боје који ће проћи раскрсницом, углавном вреди посматрати 
као расподеле без памћења. Тако је и са таласима-честицама квантне механике, вероватноћама 
њиховог налажења у (х, Е) на датом месту (х) у датом тренутку (2), које су толико елементарне да 
не могу носити и своје прошлости. Зато је за очекивати да оне, сигнали и честице [63.4. Аналогијеј, 
имају сличне расподеле. 
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Чудна је употреба комплексних бројева за такве вероватноће у квантној механици, са становишта 
данашње физике. Међутим, са позиција моје теорије информације они се добро уклапају у причу 
(Вураз5). Не бих се понављао, сем да подсетим да су комплексна подручја такође неки исходи, та 
реална тек у комбинацијама (збировима) са себи сличнима. 


64.1. Независност 

Навешћу прецизније услове у којима се јављају експоненцијалне расподеле, јер се оне врло често 
срећу у применама и вреди те ситуације разликовати других њима наизглед сличних. Најчешће су 
ти услови у теорији вероватноће познати као Пуасонов процес. 


Замислимо да у једној тачки проводника података, у току неког периода времена (Е) региструјемо 
одређену групу сигнала (л, 15, ...,П о). Оно што израчунавамо је вероватноћа појаве ових сигнала у 
датом периоду. 


Теорема 1. (Експоненцијални процес) Када појава бар једног сигнала из скупа (л1,15, ...,пој У 
временском периоду дужине : > 0 има вероватноћу | (1), где је Е (Е) непрекидна и растућа 
функција времена, ако је та вероватноћа независна од почетка периода [ и независна од 
претходних сигнала, тада је Е (6) = 1 — 2“, где је параметар 7, > 0. 


Доказ: Нека је р вероватноћа да се сигнал неће појавити у периоду јединичне дужине (# = 1),а 
сам период поделимо у п једнаких (дисјунктних) интервала. Нека је 7) (1/п.) вероватноћа да се 
сигнал неће појавити у таквој једној подели (: = 1/т). Због услова независности је: 


р = [р/п)]", или ра/п)= >". 
Отуда је вероватноћа да се сигнал неће појавити за време ( = К/п, за К = 1,2, ..., једнака: 
ро(к/п) = р у" и Еп) =1—ру", 


Како је Р (6) растућа функција времена, за (К — 1)/п. < # < К/п биће: 


Кк—1 [и 
Е (—) СЕО<Е (=). 
п п. 
Функција Е (2) је и непрекидна, па можемо прећи на лимес: 
а 2(Е) = 1—р'. 
п—0о0 


ћ, 


За сваки број р Е (0,1) постоји број 7. Е (0, со) такав да је р = е “, чиме је теорема доказана. ш 


Последњом теоремом доказано је да независан случајни процес (без памћења) мора бити баш 


експоненцијалне расподеле, али из доказа се може се видети да „скоро увак“ важи и обрнуто, јер 


п 


– – п . 
важи е и (е 2) = " = р1' р2' ·-.' Ру чак и када су р;-ови различити, али ако су те једнакости 


(статистички) тачне за свако п та је различитост мање вероватна и важи и обрат теореме. 
Вероватноћа Е (1) = 1 — е “У има густину, по дефиницији једнаку: 


аЕ 
тај Др = – МЕ 
90) пр 567, 
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а то нам је позната густина експоненцијалне расподеле непрекидног параметра [. Позната нам је 
и средња вредност (очекивање) појаве (бар једног) датог сигнала џ = 1/7. Пре тога смо видели и 
доказ још значајнијег става, да унапред дата средња вредност (очекивање) расподеле са захтевом 


да информација буде минимална, дају баш експоненцијалну расподелу [Информатичка теорија |, 
41. Теорема 1. 1, 108. странај. Ово двоје, да је експоненцијална расподела без памћења и најмање 
информације, у складу су са начелом штедње комуникације (интеракције). 


Поновимо, ако систем отказује око п = 1,2, ... пута током Т часова рада, претпоставићемо да он 
отказује по једном просечно сваких т = Т /п часова и да је интензитет отказа 7. = 1/т отказа/сат. 
Тада је: 


Е Е 


Рг(0,:) = јод а! = | а! = – (ем) =1—е"М = (6) 
[)] [0] 


вероватноћа да ће током времена : систем отказати. Када 6 — со, тада Е(Е) — 1. 


Пример 1. Ако систем откаже 4 пута током 1000 часова рада, претпостављамо да он отказује по 

А р 1 

једном просечно сваких 1000/4 = 250 часова и да је интензитет отказа / = ван 0,004 отказа/сат. 
Тако је: 


Р(еја = с а = 70000 = — “== 0,86466. 
вероватноћа да ће систем отказати бар једном током Е = 500 часова рада. 0 


Замислимо да имамо једну телефонску линију и један телефонски апарат. Поруке стижу независно 
и позиви имају независна трајања, тако да и почетак и трајање разговора имају експоненцијалну 
расподелу, са параметрима а и 8 редом. Интересантна су нам бар два стања таквог система: 


• л,—телефон слободан, 


• п,—телефон заузет. 
Видели смо од раније да је К;(А6) = 1 —е 77: 


период ДЕ — 0, а да је обратно К, (ДЕ) = 1—е 


вероватноћа преласка из стања под у пл, за неки 
–В'АЕ Даље треба израчунати вероватноћу ПОД 
произвољном тренутку Е. Претпостављамо да се нови позив губи ако је телефон заузет, а да су плу 
и п> једина стања. Коефицијенте матрице Л тражимо по дефиницији: 

Ку» (д0) Ку (Д6) 

2 = = = а, о = Штп = = 
12 7 о0 ДЕ 21 доо ДЕ 

Систем диференцијалних једначина Колмогорова даће нам опште решење бинарне матрице К 
које смо већ израчунали [63.1. Грешке копирањај. 


За бољи пренос података препоручујемо [63.2]: преносник веће брзине, мањих техничких сметњи 
(А), краће кодне азбуке (5 слова). Ово троје је препорука, јер управо је то интерпретација (слабо за 
сада примећена) решења иначе познатих једначина Колмогорова [63.2. Препорука]. Међутим је 
додато да овај трећи није превише битан, а како и зашто није „толико битан“, видећемо. 
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Укратко, трећа препорука је мање значајна, јер дуже азбуке нека слова занемарљиво ретко 
користе. Зато, рецимо, анализирајући сигнале из свемира, као и говор делфина, према облику 
графа фреквенције сигнала можемо препознати интелигентну комуникацију, чак и не знајући о 
чему дотични „причају“. 


64.2. Садржајност 

Да се уверимо да дуже азбуке нека слова занемарљиво ретко користе, када текст садржи поруку 
са смислом, можемо проверавати „одокативно“, али и са једноставним програмчићима анализа 
фреквенција слова азбука по текстовима. То су задачићи које можемо сами испробавати, а ево 
примера једног од резултата. 


Пример 2. Из моје књиге „Приче о информацији“, узео сам поглавље ,1.1. Слобода“ и пребројао 
велика и мала слова српске азбуке (компјутером). Од укупно 2803 знакова тог текста, 2268 била су 
нека од 30 великих, или исто толико малих слова српске азбуке са следећом фреквенцијом: 


1. А+а = 0 + 272 = 272 У 272/2268 = 11% 16. Н+н = 3 + 123 = 126 > 6% 
2. Б+6=0 + 50 = 50  2% 17. Њ+њ=0 + 23 =23 У 1% 
3. В+в=0 + 74 = 74 > 3% 18. О + о = 3 + 290 = 293  13% 
4. Г+г=0 + 37 = 37 У 2% 19. П+п =1 + 55 = 56  2% 
5. Д + д = 3 + 100 = 103 У 103/2268 = 5% 20. Р+ р=0 + 83 = 83 > 4% 
6, Ђ+ђ=0+3=3 У 0% 21. С+ с=3 + 115 = 118 > 5% 
7. Е+ е=0 + 192 = 192 > 8% 22.1 + т = 2 + 100 = 102 > 4% 
8. Ж+ж=0 + 14 = 14 У 1% 23, Ћ+ћ=0 +17 = 17 > 1% 
9. 3+3=4 + 51 =55  2% 24. У+у=0+71=71 > 3% 
10. И + и = 1 + 198 = 199 У 9% 25. Ф+ф=0+5 =5 > 0% 

11. Ј +] =2 + 63 = 65 У 3% 26. Х+х=1+6=7 > 0% 

12. К+к=1+59 = 60 > 3% 27. Ц+ц=0+9=9 У 0% 

13. Л+ л= 0 + 82 = 82 > 4% 28. Ч + ч= 0 + 20 = 20 У 1% 
14. Љ +" љ = 0 + 10 = 10  0% 29. Џ+џ =20+0=0 У 0% 

15. М+м =2 + 95 = 97 > 4% 30. Ш+ ш=0 + 25 = 25 У 1% 


У низу од 100 слова сличног текста, рецимо, слово „Д“ или „д“ појавиће се близу 5 пута на дужини 
од 100 слова текста, или тачније интензитет појављивања овог (великог или малог) слова азбуке, 
по једном слову текста, био је приближно 1. = 0,0454 пута. То значи да очекујемо да се оно јавља 
након „сваких“ џ = 1/7 = 22 слова текста. Уопште је: 

и 


Е(џи) = |Ео фае=1—е"в=1—е71 ~ 0,63212 
[0] 


вероватноћа да се слово појави у очекиваној дужини низа свог појављивања. |] 


Даљу расправу ове „вероватноће очекивања“, иначе само наговештене у датом примеру, видите у 
прилогу „Репрезентативни узорак“ (на енглеском). Узгред приметимо да би једнолика расподела 
вероватноћа слова у тексту указивала на њихову насумичност. Порука таквог текста била би попут 
излазне из црне кутије, канала толико оптерећеног шумом да улазне поруке на излазу „нема“. 
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Још једном, то би била потврда да губитак информације (дезинформацијом) настаје вишком (а не 
мањком) – због додатих сметњи самог канала преноса [53. Теорема 1]. Зато су насумичне поруке 
„без садржаја“, односно „неинтелигентне“ и имају униформне расподеле, јер је таква максималне 
информације [41. Теорема 1./. Уједно, када се појави „садржајност“, односно „смисленост“, као и 
организација система уопште видимо, на овај начин такође, да се смањује „количина опција“, или 
информација. 


Међутим, знамо да теме о којима причамо могу бити повезане, да претходни делови текста могу 
иницирати следеће, када би се емисија словне информације понашала као да „има меморију“, те 
да за такве не можемо „отприлике“ утврдити имају ли експоненцијалну расподелу. 


Ради комплетирања горњег примера ево и сортираних појављивања слова тог текста: 


1. О 293 7. Д 103 13. У 71 19. Г 37 25. Љ 10 
2. А 272 8. Т 102 14. Ј 65 20. Ш 25 26. Ц 9 
3. И 199 9. М 97 15. К 60 21. Њ 23 27. Х 7 
4. Е 192 10. Р 83 16. П 56 22. Ч 20 28. Ф 5 
5. Н 126 11. Л 82 17. 3 55 23. Ћ 17 29. Ђ 3 
6. С 118 12. В 74 18. Б 50 24. Ж 14 30. Џ 0 


Поделите наведени број са бројем свих слова текста (2268) и добићете фреквенцију, статистичку 
вероватноћу слова у датом тексту. Иако ту појава самог слова углавном следи експоненцијалну 
расподелу, верујемо, из ових бројева не видимо да то мора бити случај и са дистрибуцијом свих 
фреквенција. То питање „меморијске“ природе датог текста, да ли његове претходне реченице 
битно утичу на следеће, размотрићемо касније. 


Пример 3. Из исте књиге „Приче о информацији“ узмимо следеће поглавље „1.2 Либерализам“ и 
избројмо велика и мала слова српске азбуке (компјутерским програмом). Од укупно 3938 знакова 
текста има 3217 великих или малих слова српске азбуке, сортираних у „топ листу“: 


1. А 403 0,125 1. Д 116 0,036 21. Ш 30. 0.009 
2. И 326 0,101 12. Ј 104 0,032 22. Ћ 26 0.008 
3. Е 292 0,091 13. У 104 0,032 23. Њ 25 0.008 
4. О 292 0,091 14. К 93 0,029 24. Ж 22 0.007 
5. Р 210 0,065 15. Л 93 0,029 25. Ц 21 0.007 
6. Н 191 0,059 16. П 93 0,029 26. Ч 14 0.004 
7. Т 142 0,044 17. Б 65 0,020 27. Љ 11 0.003 
8. В 136 0,042 18. 3 55 0,017 28. Ђ 8 0.002 
9. С 135 0,042 19. Х 44 0,014 29. Ф 7 0.002 
10. М 118 0,037 20. Г 41 0,013 30. Џ 0 0.000 


Пласман у „топ листи“, слово, број појављивања међу 3217 слова и фреквенција. [0 


Програм за генерисање ових фреквенција у наставку садржи и иначе уграђене програме за 
линеарну регресију (Масћте |еагп!пе - Цпеаг Еергеззјоп, Рућоп) и цртање графа. То су кратки 
програми од којих ћу нешто навести касније. Један црта слику дистрибуције вероватноћа тачака 
лево (граф 1), а други (граф 2) израчунава линеарну регресију (оптималну праву линију средњих 


вредности) и приказује је поред истих тачака на слици десно. 
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Граф 1. и 2. 


лтрокЕ тарјо11р.рурјоЕв аз рјЕ 


х = [ЈА', "Бе, Ва БАБЕ "Де; и МЕ, 'ж', БЕЛЕ ТИ, РАД, К', УЈЕ 
"Љ' 'М', Но, ЊЕ. ФДЦЕ ПА Мр, у ДАЈЕ Није Уа 'Ф', реј "Цу 
"д" "1", '"Ш' | 

у = [403, 326, 292, 292, 210, 191, 142, 136, 135, 118, 116, 104, 104, 
93, .:983, 93, 65, 55, 44, 41, 30; 26, 25, 22, 21, ТА; ЛА, Ву 7; 07 
р1Е.5асаћек(х, у) 


рјЕ.5ћом () 


и риуририр и ррририррирраруририиррируиириираирние 
АМИЕОРНТВСМД|ЈУКЛПБЗХГШЋЊЖЦЧЉЋФИЏ 


трокЕ тарјо11р.рурјоЕв аз рјЕ 


Екоп зсјру 1тпрокЕ зЕаћ5 


Хо [1, 2; 3. 4, 5; 6, 4; 8, 9, 10, 11, 12, 15, 14, 155; 16, 17, 18, 
19, 20, 21, 22, 23, 24; 15, 26; 27; 28; 29, 301 

у = [403, 326, 292, 292, 210, 191, 142, 136, 135, 118, 116, 104, 104, 
93, 93, 93, 65, 55, 44, 41, 30, 26, 25, 22, 21, 14, 11, 8, 7, 01 
зјоре, 1пбексере, к, р, 5584 екк = 5ба 5. 1 1пкедке55(х, у) 


аде пуЕипс (х): 
кебикп зјоре % х + јпЕексерЕ 


путоде1 115 (тар(тућипс, х)) 


рјЕ.аса ћек (х, у) 


рјЕ.рјов (х, пуподе1) 


рјЕ.5ћом () 


Крај примера графова. 0 
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Пример 4. У наставку књиге „Приче о информацији“ је следеће поглавље ,„1.3 Истина или лаж“. 


Међу укупно 4108 тих знакова било је 3295 великих и малих слова азбуке, сортираних у: 


~ 
о 


(0009 ~ ов Ур о пдог= 


ог ољ=-"чотпхр»> 


· Д 


412 0.125 
336 0.102 
326 0.099 
308 0.093 
206 0.063 
196 0.059 
155 0.047 
137 0.042 
131 0.040 
127 0.039 


· К 


127 0.039 


Ј 118 0.036 


У 


В 
П 
Л 
Е 
г 
Ч 
Ц 


115 0.035 
100 0.030 
89 0.027 
78 0.024 
57 0.017 
38 0.012 
36 0.011 
34 0.010 


„_Ћ 


ж 
Б 
Њ 
ш 
Љ 
Х 
Ђ 
Ф 
Џ 


33 0.010 
27 0.008 
26 0.008 
26 0.008 
25 0.008 
9 0.003 
9 0.003 
8 0.002 
6 0.002 
0 0.000 


За разлику од претходних примера на следећем графу је дистрибуција вероватноћа ових слова. 


0.12 


0.10 


0.08 


0.06 


0.04 


0.02 


0.00 


АИЕОТНРМСДК ЈУВПЛЗГУЧЦЋЖБЊШЉХ 5 ФИЏ 


Подсећам, 412 је број појављивања слова 'А' у датом тексту. Он подељен бројем 3295 свих слова је 


вероватноћа тог слова, Рг(А) = 0.125, која је последњи број колоне. 
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У сва три примера водеће фреквенције имају неки самогласници који су у групама 1-3, а за њима 
следе све ређа слова азбуке. Тешко је напамет рећи да ли је ова дистрибуција (свих слова азбуке) 
експоненцијална, што би значило независност следећих делова текста од претходних. 


Унапред дато слово азбуке у тексту може се појављивати у експоненцијалној расподели, а да за 
дистрибуцију свих слова азбуке то не мора бити. У случају насумичног текста, дистрибуција слова 
биће униформна (максималне вероватноће на интервалу те азбуке), али ће у случају смислених 
порука имати чешћа и ређа слова. Зато ће „смислен“ текст (са поруком) имати мању информацију 
од „бесмисленог“ (насумичног)! 


Ово запажање је потврда, иначе кажу ми „апсурдног“ становишта моје „теорије информације“, да 
саопштавањем порука шаљемо мање информације. То је зато што је шум (сметња) додатак који не 
брише оригинале већ их само замагљује, дезинформише нас. Доследно у мојој наводној теорији, 
организацијом могућности смањујемо њихову „количину опција“ (информацију), или слично, са 
организацијом друштва смањују се слободе (просечан обим избора) индивидуа. То су заправо и 
неки од главних садржаја расправљаних у овој скрипти, попут привлачности минимализма. 


64.3. Раздвојивост 

Ерланг је основна јединица телекомуникационог саобраћаја коју користе дизајнери говорних 
система – названа по данском математичару, статистичару и инжењеру, који је изумео области 
саобраћајног инжењерства и теорије чекања. Изнети промет у ерлангима је просечан број позива 
измерен у датом периоду (често један сат), док је понуђени саобраћај онај који би се преносио ако 
би сви покушаји били успешни. Овде ћемо нагласити само један од аспеката Ерлангових процеса, 
њихову сепарабилност (раздвојивост). 


Теорема 2. (Ерлангов процес) Претпоставимо да су испуњени сви услови за експоненцијални 
процес и да важи сепарабилност, тј. да је појава два или више различитих сигнала у истом 
тренутку (скоро сигурно) немогућ догађај. Тада је вероватноћа појаве тачно ] = 0,1, ...,5 сигнала у 
интервалу времена : > 0 једнака 

(ма); 


= — КЕ 
Е(е) = Т е 


где је параметар 7 > 0. 


Доказ: Према формули потпуне вероватноће је 


Ј 
Е(Е + 42) = |: Е(о) · Б-1(40). 
:=0 


Наиме, пријем ј сигнала у интервалу :# + Д: може се раставити на ] + 1 независан догађај: 


1. 0 сигнала у С, а ј сигнала у ДА; ; 
2. 1 сигналу ба ј — 1 сигналу Д;; 


ј+1. ј сигнала у С, а 0 сигнала у АС. 
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Узмемо ли довољно мало 4: — 0, тада претпоставка сепарабилности искључује ситуације од 1 до 
Ј. Зато је 


Е(Е + 40) = Е (1) · (Де) + Е 1 (1) · Е; (Д0). 
Из истог разлога (ДЕ — 0) се у интервалу Д: може појавити један или ниједан сигнал, тј. 
Отуда је 

Е(е + Ае) – Ке) = [Е;1(0) – 2,00] · 1, (42). 


Овде је Е (А!) вероватноћа да се неће појавити нити један од сигнала у интервалу 4: под 
претпоставком важења експоненцијалног процеса, те је: 


Е(АО) = 1— (А) = 1—е МЕ = 7. ДЕ + О(Д0). 
Преласком на лимес, када Д; — 0, добијамо једначине 


аЕ(е) _ 


сЕ АЕ) ФА Е-1(0). 


са почетним условима Ро(0) = 1, 2 (0) = 0 за ј > 1. Лако се решавају сменом Е (0) = УЛОЈ 
где су ј (6) непознате функције. Добијамо 


ај (Е 
С ТЕВИНО 
где је (6) = 1. Рекурзије дају: 
(а, 1)) (9), 
ДОО 


Тиме је теорема доказана. ш 


Погледајмо како се иста теорема (Ерлангов процес) налази из Колмогоровљевих диференцијалних 
једначина. Због сепарабилности, за мали интервал Д; у којем се може одвијати највише по једна 
трансформација, К(Д), могућа је само једна промена стања сисгтема. Према томе, за дато ! само 
је један од коефицијената К;, (1 = ј) различит од нуле. Ако је Е; вероватноћа реализације !-тог 
стања (стигло је ! од 5 сигнала), онда систем за време ДЕ може прећи најдаље у ! + 1 стање. 


Због независности је густина вероватноће међусобних прелаза константна, па за свако : је: 
Ки = -А, а А 


док су сви остали коефицијенти нула. То је довољно да се формира систем диференцијалних 
једначина 
аЕ (6) 
а 


=— А (О + 4 (5) 


чије решење је Ерлангов процес. 


Растко Вуковић РЕН 


ИНФОРМАТИЧКА ТЕОРИЈА || 


Ерлангов процес се може добити и из тзв. Бернулијеве шеме која посматра само један случајни 
догађај л који се дешава са вероватноћом 27, или изостаје са вероватноћом ад = 1 — р. Ако опит 
понављамо п пута, онда Бернулијева вероватноћа да ће се догађај п десити тачно ] = 0,1,...,п 
пута износи 


А, : 
виФр = ( )р'“. 
Ј 
Акоп Р(]) — а, када је ј фиксирано и п — со, тада 
ј 


а 
РЈ) > њ 


Детаљна објашњења и доказе можете видети у мојој књизи Квантна Механика, 1.1.7 Расподеле 
вероватноћа. Посебно само о сепарабилности касније ћемо се позабавити мало детаљније. 


Теорема 3. (Пуасонов став) Ако је 


Љб = (|) Ра – рај" 


и ако низ бројева р, = а, — а када п — оо, тада је 


ак 


Миа Ји) = у е 


–а 


Доказ: 


п-К 


јод = (јава = руте = рај (2) (1- 9) = 


п 


Када п — оо трећи фактор, велики разломак, тежи 1, средњи тежи е“%, а први а“ /К!. Тиме је став 
доказан. ш 


Када у Бернулијевој шеми меримо п. пута појаву догађаја пл у току времена 1, а када за исто време 
п — оо добићемо п. · Е · р, — а, односно п · р, — 7, док је а = ХЕ. Ова је апроксимација нарочито 
погодна за п > 50 ипр < 10. Из Пуасонове добијамо Ерлангову, то брже што је а мање. 


Хаотично кретање честица, познато као Брауново кретање, има ову особину. Ако се апсиса једне 
честице помера за х улево или удесно према Бернулијевој шеми, онда ће кретање много честица 
описивати гранични процес Пуасоновог става. 


Са друге стране имамо услове Ерланговог процеса: 


|. кретање честице не зависи од избора почетног тренутка; 
Н. _ честице у различитим областима се крећу независно; 
ШЕ немамо две или више честица у истој тачки. 
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Према томе је јасан смисао вероватноће 


де 
БК) = - 6, А>0 


где је 7. = пр очекивање, р вероватноћа сваког појединог исхода у низу од п опита, при чему је 
жељени број реализација тачно К. Овако формулисан Пуасонов процес лако се проверава и добро 
апроксимира Бернулијеву расподелу за Х < 10 и п > 50. 


Пример 5. У претходном, 4. примеру, вероватноћа појављивања слова 'Ф' је р = 0.002. Тражимо 
вероватноће да у случајно бираном низу од 100 слова тог текста: 


1) буде тачно 5 слова 'Ф'; 
2) број слова 'Ф' није већи од 5. 


Из вероватноће да је насумично слово управо тражено, Рг(Ф) = р = 0.002, следи вероватноћа да 
такво (поједино) слово није тражено, Рг(—Ф) = 1 – р = ад = 0.998. Како низ од 100 слова можемо 
схватити као независно понављање једног слова 100 пута, то је према Бернулијевој шеми: 
1) Лоо(к = 5) = Рг(К = 5) = (17) х 0.0025 х 0.998 ~ 0.000002; 
2) Лок <6)= РИК < 5) = Р(К = 0) +>" РИК = 1) + Ф РК = 5) = 
~ 0.818567 + 0.164041 + 0.016273 + 0.001065 + 0.000052 + 0.000002 ~ 0.99. 


Међутим, можемо применити и Пуасонову апроксимацију, јер Х = пр = 100 х 0.002 = 0.2 < 10 и 
п = 100 > 50. Тако израчунавамо: 


к 5 
1) РК = 5) = –~ е“% === 2792 ~ 0.000002; 
0,28 НЕ = 1 0.2 0.04 0.008 0.0016 0.00032 
2) Ри(К < 5) = ди е о — е 5а (+ рак ај" МЕ 24 120 ) ~ 0.999. 


Резултати су једнаки у првих шест децимала, а бивали би још више уједначени за веће пи мање р. 
Случајни исечак датог текста: „настојећи да ту нешто поправимо у незнању да смо заправо жртве 
шкртарења природе у давању информације. Грци су приметили“ – као што се види, има 101 слово 
и једно појављивање слова „ф“. Највероватније (р) ~ 0.82) да у низу од око 100 слова, слова 'ф' ни 
неће бити. 0 


Очекивање и варијанса Пуасонове расподеле су Е(Х) = Уаг(Х) = 7, у 5. примеру 7. = 0.02, што се 
види да је такође тачно кроз 2, 3. и 4. пример, јер се вероватноће слова 'ф' тамо појављују редом: 


7 6 
= ~ 0. == = 0. = = 0.001821. 
2268 0.002205, 3217 0.002176, 3295 


Варијације су у оквиру израчунате варијансе, а слично је и са Бернулијевом шемом. То је уједно и 
врста „експерименталне“ потврде да се поједина слова у тексту држе експоненцијалне расподеле, 
конкретно Пуасонове. Такође, да је појављивање унапред датог слова у низу слова текста лишено 
меморије. 
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65. Регресија 


Вратимо се на примере графова [64. Граф 2] дистрибуције слова у тексту и праве линије која их 
најбоље представља. Узмимо сада следећи прилог (1.4 Феминизација) из исте књиге „Приче о 
информацији“, пребројмо све знакове новог текста (3850) и посебно уочимо и пребројмо сва 

Ћирилична велика и мала слова (3150). Резултат је: 


А+а=3+373 = 376 
Б+6 =1+39 = 40 
В +в =1 + 102 = 103 
Г+г=1+45=46 
Д+д=6+93 =99 
Ђ+ђ=0+6=6 

Е + е = 1 + 300 = 301 
Ж+ж=0+14=714 
3+3=4+66 =70 
И + и =5 + 320 = 325 
Ј+]=0+110=110 
К+к=3+94=97 
Л+л=71+73=74 
Љ+љ=0+14=14 


М+м=0+121=121 


Н + н = 3 + 205 = 208 
Њ+њ=о+35= 35 
О + о = 2 + 284 = 286 
П + п =4 + 90 = 94 
Р+р=0+161= 161 
С+с=3+155=158 
Т+т=2+136=138 
Ћ+ћ=0+21=21 
У+у=2+129 = 131 
Ф+ф=1+15=16 
Х+х=0+17=717 

Ц + ц=0 + 39 = 39 
Ч+ч=0+23 =23 
Џ+џи=0+0=0 
Ш+ш=0+27=27 


Након сортирања по броју појављивања слова, добијамо њихов „пласман“: 


1. А 376 0.119 11. Ј 110 0.035 21. Њ 35 0.011 
2. И 325 0.103 12. В 103 0.033 22. Ш 27 0.009 
3. Е 301 0.096 13. Д 99 0.031 23. Ч 23 0.007 
4 0 286 0.091 14. К 97. 0.031 24. Ћ 21 0.007 
5. Н 208 0.066 15. П 94 0.030 25. Х 17 0.005 
6. Р 161 0.051 16. Л 74 0.023 26. Ф 16 0.005 
7. С 158 0.050 17. 3 70 0.022 27. Ж 14 0.004 
8. Т 138 0.044 18. Г 46 0.015 28. Љ 14 0.004 
9. У 131 0.042 19. Б 40 0.013 29. Ђ 6 0.002 
10. М 121 0.038 20. Ц 39 0.012 30. Џ 0 0.000 


У последњој колони су фреквенције, тј. „статистичке вероватноће“. То су бројеви претходне 


колоне дељени константним бројем свих слова (3150). 


65.1. Праволинијска 

На следеће две слике су графови дистрибуције горњих 30 великих и малих слова српске ћирилице. 
На левој, дуж апсцисе, доле потписано словима како би се могао видети њихов поредак, иначе из 
претходног пласмана „топ листе“. Десно је иста дистрибуција са графом праве линије (линеарне 
регресије) која их „најбоље“ апроксимира. 


Тачке дистрибуције дате су паровима координата (ху, Ур), за К = 1,2, ...,5, где је у нашем случају 
број слова 5 = 30. На пример Т(8, 0.044). Права линија регресије је г, = Ј (Х,) = ајху + а, са ау 
и а; константним параметрима које ћемо сада и израчунати. Низ ху су, као што видимо, првих 30 
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природних бројева, а константе (а и 4), тражимо методом најмањих квадрата, тј. тако да збир 
свих 30 квадрата разлика ордината датих тачака (у) и ордината регресионе линије (ју) буде што 
је могуће мањи. 


У" • пало + 7“ 
.. • 
ај 108 + њР 
+ 0 |“ 
006 + .. 
.. 6. ~ 
004 %. де "~ 
".... 002 Р.— 
507 1 “о „У 
.... о00 "ЗА .. 
".....,. “а 
200 + б 
природи иритира унутар пир ририририниуриуи 002 +. А 5 ~ 
АМЕОНРСТУМЈВОДКРЛаГоЦЊШЧЋпхоЖжљђИ о 5 Г] 5 о РО 0 
Другим речима, тражимо такве ај и а, да функција 
9(а1,02) = (ћ — ул) + (фр — у) + + (( — уг) = 
= (ах, + а — ул)“ + (алх; + а — уг). + + (азх + а; — у): 
5 
– У (а + а – у)“ 
к=1 
има најмању вредност: 
д д 
да у, 38-6 
дал да» 
5 5 
> 2(а1Хк + а, — УкОхк = 0, 2(а1Хху + а, — Ук) = 0, 
5 5 5 5 5 
с У ха У хе = У жеук, с У хрфа= У ук 
к=1 к=1 к=1 к=1 к=1 
а1А> + а Ај = В,, ал А + а25 = Во 
где су бројеви: 
5 5 5 5 
А, = ј х2 = 9455, А, = Њу ху = 465, В, = > хрук = 7.958095 ВВ) = > ук = 1, 
к=1 к=1 к=1 к=1 


познати (5 = 30). Систем линеарних једначина: 


Би + а Ај = ВБ, 
ал Ај + а25 = Во 


има решење: 
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58) – АјВ) 5' Орел хкук) – (О: Хе) 
КИ а О О и 
= АуВу — АјВу _ (ба хр) – (рат Хе) ' Оро ХкУк) 


ај = 


# = 
2 БА; — Аг 5 Ор хе) – Ола хе)“ 
_ 30 · 7.958095 — 465 _ —226.25715 – —0,0033556862 
(1 =730.9455 — 4652 — 67425 
_ 9455 — 465 · 7.958095 _ 5754.485825 – 0,0853464696 
#27 30.9455— 4652 67425 
Добили смо граф приближно праве линије, једначине Ј (х) = —0.003х + 0.085. Коефицијенти су 


јој мали бројеви због размере координатног система. Ординате су делови јединице (вероватноће) 
а апсцисе су природни бројеви (30 пута већи), а затим њу равнају и учешћа многих ретких слова. 


Средње вредности (очекивања) датих и израчунатих тачака су: 


5 5 
Иу = > Хкук Шп“= > хејк 
к=1 к=1 


пу = Ву шу = 014; + 0241 


дакле једнаке су (а1 А; + а; Ај = Ву), овде џ = џу = шп = 7.9580952380952, са разликеама (39 и 
41) тек након 13. децимале, а и то због грешака заокруживања. Исте су и варијансе: 
5 


5 

1 2 1 

у = – > (ок – пу) 77 <> с = Шу) = Ота = а" = 131.796994, 
к=1 к=1 


па су им исте и дисперзије ду = буу = Ма = 11.480287, што је разумљиво и интуитивно, јер су то 
мере средње удаљености иначе фиксних тачака апсцисе (х; = К) од једне њене фиксне тачке (џи). 


Како је број алфа1 негативан, а број алфаг је релативно мали (а, < би а; ~ 0), то редни бројеви 
на крају листе дају негативне ординате (ју = ааху + а), наводне вероватноће слова (са редним 
бројем ху > 25). Оне су, дакле, нетачне и чине додатни проблем употребе ове регресије. 


У следећој табели наводим претходну „топ листу“ упоредо са израчунатим вероватноћама, нове 
према формули ј; = ах; + а са коефицијентима а, = —0.003356, а; = 0.085346. Последње 
негативне израчунате „вероватноће“ такође су у табели, иако таквих стварно нема: 


1. 0.119365 0.08199 11. 0.034921 0.04843 21. 0.011111 0.01487 

2. 0.103175 0.078634 12. 0.032698 0.045074 22. 0.008571 0.011514 
3. 0.095556 0.075278 13. 0.031429 0.041718 23. 0.007302 0.008158 
4. 0.090794 0.071922 14. 0.030794 0.038362 24. 0.006667 0.004802 
5. 0.066032 0.068566 15. 0.029841 0.035006 25. 0.005397 0.001446 
6. 0.051111 0.06521 16. 0.023492 0.03165 26. 0.005079 -0.00191 
7. 0.050159 0.061854 17. 0.022222 0.028294 27. 0.004444 -0.005266 
8. 0.04381 0.058498 18. 0.014603 0.024938 28. 0.004444 -0.008622 
9. 0.041587 0.055142 19. 0.012698 0.021582 29. 0.001905 -0.011978 
10. 0.038413 0.051786 20. 0.012381 0.018226 30. 0.000000 -0.015334 
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Зато ни У; ју није 1, а требало би бити. Сличан је проблем са Шеноновом информацијом, не датих, 
него регресијом добијених вредности. Ипак наводим овај рачун: 


5у=—- > ук1ов ук = 4.292664 5=— > је 1082 је = 4.486895 
УК>О јео 


Узимам само позитивне вероватноће (свих 15 децимала, компјутером). Испада да је информација 
„расутих“ 5у (ордината) ипак мања од „уједначене“ информације 5); (линије). То је прихватљиво, 
јер „хоризонталније“ вероватноће, равноправнијих исхода, имају већу информацију. 


За крај дефинишимо и запамтимо „дистанцу“ између датих и овако израчунатих вредности: 


уп Бн а У) – (Ћ ја У1)2 про: ( Е уг)г = 0.072938 


Тај број Дуу утолико је мањи што је боље налегање линије на тачке дате расподеле. За разлику од 
дисперзије со ~ 11.480, мере просечне удаљености свих апсциса од фиксиране, ово ду, ~ 0.073 је 
метрика, растојање између низова (врхова вектора). 


65.2 Параболна 

Узмио опет исте претходне тачке дистрибуције означене паровима координата (Ху, У; ) индекса 

К = 1,2, ...,5. Број слова је 5 = 30 и, на пример Е(3, 0.096). Линија регресије биће сада квадратна 
функција Љаг = ГО) = В,х“ + Вох + Вз, константних параметара 61, 8; и Вз које требамо 
израчунати. 


Првих 5 = 30 природних бројева ху дефинишу ординате ј; = Г(ху) = Вах: + Врхк + Ва параболе 
Љаг Коју тражимо – тако да су разлике |]; — уј| што је могуће мање. Користимо опет исту методу 
„најмањих квадрата“: 


961, Ву, Ва) = >УФ — у): = У (ба + Вохк + Ва – уЕ) 
к=1 к=1 


Третирајући 6,, 6; и Ва као непознате променљиве, са низовима ху и уз датих константи: 


ПО 08 _ 08 _ 
од | об ' два 


ВА + Аз + ВА = Ву, ВАз + ВА; + ВзАу = Ву, ВА; + [А + 583 = Во, 


0, 


где је: 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА |! 


5 5 


Во = 1, В, = |а хкук = 7.958095, В, = 3 рук = 104.390476. 
к=1 к=1 


Ово су коефицијенти система линеарних једначина по непознатима 8., 6; и Вз: 


ВА + Б;Аз + ВА; = Ву 
ВлАз + БА; + ВА = Ву 
ВА; + БА, + 835 = Ву 


Непознате тражимо Крамеровом, методом детерминанти (5 = 30): 


А, Аз А Ву Аз А 
А= |Аз А; Ај|= 9051851200.000034, А;=|Б, А; Ај|= 1552316.1428571267 
А; Ај 5 Ву А 5 
А, В; А А, Аз 82 
ћур= |Аз Вл Ај|= —78496972.6952381, А;=|А3 А; В,|= 1029193145.7523854 
А, Во 5 А, А, 8 
Да Др 


А 
Ва = 57 = 0.000171, = = –0.008672, Ва = | = 0.113700. 


Парабола регресије, квадратна функција / (х) = 61х> + 6,х + Ва, има минимум ј, = —3 Х 1079 у 
В; 


тачки Х) = ш77 = 25.283823, што значи да њене вредности након 25. слова расту. То се види у 
упоредној табели „топ листе“: 

1. 0.119365 0.105199 11. 0.034921 0.039059 21. 0.011111 0.007217 
2. 0.103175 0.097042 12. 0.032698 0.034331 22. 0.008571 0.005919 
3. 0.095556 0.089227 13. 0.031429 0.029947 23. 0.007302 0.004965 
4. 0.090794 0.081756 14. 0.030794 0.025905 24. 0.006667 0.004353 
5. 0.066032 0.074627 15. 0.029841 0.022206 25. 0.005397 0.004084 
6. 0.051111 0.067842 16. 0.023492 0.018851 26. 0.005079 0.004158 
7. 0.050159 0.061399 17. 0.022222 0.015838 27. 0.004444 0.004575 
8. 0.043810. 0.055300 18. 0.014603 0.013168 28. 0.004444 0.005335 
9. 0.041587 0.049543 19. 0.012698 0.010842 29. 0.001905 0.006438 
10. 0.038413 0.044130 20. 0.012381 0.008858 30. 0.000000 0.007884 


У првој колони табеле је „пласман“ слова, у другој је дата фреквенција, у трећој израчуната. Види 
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се да након 25. позиције дате вероватноће и 
даље опадају, док параболна расте. То значи 


| . 

. - да ни квадратну, ни праволинијску регресију, 
5 сваку због њених посебности, не треба сувише 
== а развлачити у применама. Међутим, нови граф, 
106 3 ђе квадратне регресије, значајно боље лежи по 
~“ т. Ма. датим тачкама, као што показује слика лево. 

~ 
мо ~ «45, Плаве тачке представљају дате вероватноће 
б00 3 да“ слова ћирилице, плава линија праволинијску 
= Б | | | Њу регресију, а жута је регресија параболом. Иста 
. 3 “ ~ - “ » су очекивање нове регресије претходним, јер: 
5 5 
Праг = 7 хејк = > хе (Ваха + Вухе + Ва) = 
к=1 к=1 
5 5 5 
ЋУ ж +њУ +6 У = ВА + А; + ВА, = Ву = бу. 
к=1 к=1 к=1 


Дакле, средње вредности (математичка очекивања) параболне, праволинијске регресије и дате 
дистрибуције једнака су: 


Ираг – Шп – Ну = И = В/ = 7.958095. 


Варијанса и дисперзија квадратне регресије износе: 


5 


1 
ае= > — џ)2 = 62.802826, драг = ЈЕ = 7.924823 


к=1 
Па су три дисперзије (дате, линијске и параболне регресије), корени варијанси: 


бу = 7.924826, дур = 7.924815, драг = 7.924823. 


у поретку су: уп < брат < бу, али разлике су занемарљиве. Шенонова информација је 


Браг = – ЊУ бе лов; ћ, = 4.295455 
јк>О 


Три (једнако дефинисане) Шенонове информације ових расподела: 


5у = 4.292664, 5у; = 4.486895, Брат = 4.295455, 
су у поретку: 5), < 5раг < 5. Дистанце вектора линеарне и квадратне регресије од дате су: 
ћу = Фу У) = 0.072938, Фрај = АЏраг У) =0.037036. 


Највише су уједначене вероватноће линеарне регресије и таква има највећу информацију, јер јој је 
неизвесност, а онда и емитована информација, максимална. Информација равноправнијих шанси 
већа је. Код дате расподеле разлике вероватноћа највеће су и она од ових израчунатих има мању 


информацију. 
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Ово запажање нам може изгледати „чудно“, али приметимо да је доследно. Садржајан, смислен, 
или паметнији говор је усмеренији, организованији, он је редукован од неизвесности. Слично је са 
повећавањем информације канала преноса порука док се додатно оптерећује сметњама (шумом). 
Такође, боље се уклапајући у боље организовано друштво губимо неке личне слободе (количине 
опција, тј. информације). Тежећи сигурности одричемо се неизвесности, уклапајући се у поредак 
одустајемо од „непотребних“ опција, од ризика. Такође, то значи да расту неједнакости могућих 
наших избора (знамо шта нам је чинити), смањују се „штетне“ дилеме и обим наших слобода је 
заправо мањи. Тада је мања Шенонова информација наших одлука. 


Познато нам је да задаци тражења експоненцијалних регресија методама најмањих квадрата нису 
лако решиви, пре свега због незгодних трансцедентних једначина које нам тада стоје на путу. То се 
делом види из примера који следи, а затим ћемо савладати и тај проблем, на другачији начин. 


65.3. Експоненцијална 

Нека је дата иста дистрибуција слова, са координатама тачака (ху = К, у) и потражимо најближу 
Њој експоненцијалну расподелу. То можемо покушати на претходни начин, тј. методом најмањих 
квадрата, као што је приказано у следећим примеру. 


Пример 1. функција ј, = /(Х) = е“'Х има коефицијент 7, > 0 који тражимо методом најмањих 
квадрата. То значи, зависно од параметра А, наћи минимум функције: 


9(Х) = >УФ – у): = У (еј тај 
к=1 к=1 


. д = 
за стационарну тачку, налазимо извод д по 7, тј. => = 0, односно У —1 –к(е ЈЕ ук) = 0. Следи 


да су очекиване вредности дате и ове расподеле једнаке (џу = џг = и), те: 


5 5 5 8 8 5 
ц= = = ПЕН АЕ КЕ РЕЛИВАЕ | 
из У Ку » ке Уже ) О Х | 
к=1 к=1 к 


к=1 


даба ита“ пе (ааја "а зе“ (517 
| 27“. | = е ПН 
о% 1—е"% (1— е“7%)2 


Међутим, већ за једноцифрене бројеве 5, те за 7 


не много веће од 1, биће 4 
во“ БАЈА ка (5+ 127 
па за 5 — со са добром тачношћу имамо процену ов 


џи = е“ ~ (а = е“>) 
У датом примеру је џи = 7.958, а томе одговара 
7, = 0.353. Видимо тај експоненцијални граф ом) 
00 Е= 2“%353Х 
жуто бојен на слици десно, упоредо са плавом р 
правом линијом од пре, као и дате плаве тачке 24 пи РАРННЛИИРИНЦ" 
фреквенције (вероватноће) слова. 0 : 1 ~ а о - = 
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Веома много вероватноће (жутог графа) троши се на велома мало слова, па околина очекиваног 
(око 8) има заравњен, скоро хоризонталан граф, баш у „епицентру“. Затим, површина испод овог 
графа није јединична, те он не представља расподелу вероватноћа. 


Други начин тражења најближе експоненцијалне расподеле датој је одмах претпоставком да две 
расподеле имају исто очекивање, тј. средњу вредност најзначајнијег места апсцисе. Посебно овде 
приближно х = и = 7.958 даје у = 1/џ = 0.126, а потом „најбољим“ просто проглашавамо граф 
ју) = уе“7%, доследно разматрањима из поднаслова „64.1. Независност“. 


Граф ове експоненцијалне функције регресије, 
жуте линије на слици лево, прилично успешно 
пролази кроз дате тачке вероватноћа слова. 


пов ~ У околини очекивања, апсцисе џи ~ 8, нагиб 
су | Б а функције приближно је 

5 „> о ту Јраг(и) = —уге“уи = –0.006. 

о02 0 У поређењу са нагибом праве а. = — 0.003, то 


је битно стрмије опадање, на уштрб још више 
занемарених слова ове расподел. Због бржег 
| 5 М 15 ~ 25 | падања вероватноћа, информација регресије 
експоненцијалном функцијом је мања од овде 
претходно обрађених. И заиста, то се види и на попису Шенонових информација: 


5, = 4.292664, = 5уу = 4.486895, 
браг = 4.295455, 5, = 4.033481. 


Због истог очекивања и истих вредности апсцисе, регресије и дате тачке имају исту дисперзију, 
б = 11.480287, али немају исте дистанце А у; = 0.072938, драг = 0.037036 и аб = 0.029945, из 
чега следи да је експоненцијална расподела најближа датој, мало боља од наведених. 


жжж 


Пошто се експоненцијална регресија дистрибуције слова текста показала најбољом, занимљива 
нам постаје теорема из наслова „41. Ограничења“, да ће са унапред датим очекивањем највећу 
информацију имати густина вероватноће експоненцијалне расподеле. Расподела слова текста са 
смисленим садржајем је експоненцијална, а таква расподела „нема памћење“ [64.1. Теорема 1] и 
отуда закључак да претходни делови текста не утичу битно на следеће. 


За разумевање овог парадокс, понудићу предлог. Процес који је „затворен“ са експоненцијалном 
расподелом већ је тако „пребукиран“ да не може повећавати своју информацију. Успут не нараста, 
а како (угавном) стару информацију не губи – он далеко стиже непромењен. Експоненцијални су 
они процеси, дакле, који информације добро конзервирају. 


Сада се необична, да не кажем фантастична, представа претходних теорема почиње слагати попут 
коцкица мозаика. Надам се да примећујете колико је предложено објашњење сагласно са општом 
тежњом природе ка мањој информацији, да је оштра мисао, извесност теореме, или организација 
уопште, колико привлачна својим мањком опција свему, толико и одбојна неизвесности. 
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65.4. О програмирању 

Компјутерски језик „Питон“ (Рућћоп 3.9.7) користим као лични калкулатор, а понекад програмирам 
са разним другим поставкама“. Радио сам као пројектант и програмер за банке, а и у настави, али 
то одавно није моје основно занимање. Сложенија „израчунавања“ волим радити са модулима и 
функцијама које програмирам сам. 


Анализу фреквенције слова и цртање графова раде ми две функције, зјомаРг () и зчјомабк(). Прва има 
азбуку великих и малих слова, чита задати текст, броји све карактере текста, броји сва дата слова у 
тексту, сортира фреквенције слова. Обично другом позивам прву, она преноси параметар и враћа 
листу слова и одговарајућу листу фреквенција. Параметар је бинарни број, рецимо ххх, значења: 
Тхх да се штампа „текст“, хлх да се штампа „азбука“ детаљно са великим и малим словима, хХ1 да 
се штампа „топ листа“. Ако се не наведе, тај параметар је „000“. 


аде з1омакк(рлпакпо = '000'): # Ркојапје даЕаћ з1ома и 'Еека.| хЕ' 
рлплакло = 'ббб', Б Јп 1"0", "1": 
"трр' зЕатра 'ћехЕ' 
"Бјр' зЕатра 'ахрики' 
"Бр1' зЕатра 'бор 11561' 


# ореп Е11е 1п кеад птоде 

кека = 'ћека. хЕ' 

Е1] = ореп(ћека, епсод1лпа = '15Е-8', поде = 'х') 
кехЕ = Е11е.кеад() 

Е11е.сјозе () 


ЈЕ Рлпакпо[0ј]ј == '1': ркзапЕ(ћехЕ) # ако је БРлпакпо '10р6' 
гпака = Јеп(ћехЕ) 
#епа 1 = [ЈА', Шае ОЈ МОВ НЕ МЕ Шеј НЕ ПЕК. "2", Кеа 


ШАЕЊЗР "М", МЕ ОР, КЕ КОРА ТЕ Шо Р Ма ДР Оле" Мет "им", раје ЈЕ 


Кт и; а Р Моје тр', "ар Шоји ан МЕЊА МАРИЈЕ у "и", у", ЊЕ 
та" 

акр] = [ЈА', ЈБ', Ви. ШИ ЊАДЕ Де "Ђ' НЕ, "ж' 'З' 'и' "Ј' 
'к" '"Л' '"Љ', '"М', Не "Њ', 104 "5 "р' ОИ а АЈ 'у' 'р' 
"х' У НК , МОДИ 

гкр2г = | "а! 6' '"в' и, 'д' 'ђ', Кеб, Мк, '"з' ти' Уа 
к', ' Је "Љ' "м' 'н', 'њЊ', ој УП оде "а; Цела а АЕ 'ф' 
и, Шаља К.р' Ме ' ШИ 

агрб4а = [] # хекомаћпосе 

атрз = [] # Котада з1ома 


13 Одговарам на питања. 
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азрг = 5зкр2г # птаја 510о“а 


агб1 = зкр] # хмеј1ка з1ома 
ркој = 0 
кода = Јеп(агб1) # Ркој 5 з1ома ахгрике 
Кок 1,х 1п епџтека е(а251): 
з10ом1 = азгб1[1] 
з10ом2 = азгр62[1] 
рк] = бБехЕ.соцп; (510м1) 
рк2 = БехЕ.соцџп;| (5102) 
рк = Рк] + Ррк2 
агр3.аррепа (0к) 
ЈЕ Рлпакпо[1] == '1': #зЕатра ахрики, Рлпакпо 'Рр16' 
рејапЕ(5]ом1, '+', 510ом2, '=', Рк], '+', Бег, 
=ђ, Бе) 
ркој = Ркој + Бек 
сопЕ1пџе 
репе ('ЈКкарпо 5зу1ћ хпакома =', гпака) 
ре1лЕ ("аракпо даЕћлћ 5]ома =', Ркој) 
пп = 1 
жћје Теџе: # Ррирје зокЕ 
ЈЕ пп == 0: Бкеак 
пп = 0 
к = Кода - 1 
Кок 1 1п капде(к): 
ј=1+1] 
ЈЕ агрз[1] < агр3з[ј]: 
а = агр61[ј] 
р = агрз[ј] 
агр01[ј] = ахб1[1] 
а2г03 [1] аг03 [1] 
аг01[1] = а 
аг03[1] = 
пп = пп + 1 
крк = [] # кедп; Ркој ц 'Бор 11551' 
Кок 1 1п капде(Ккода): # зЕатпрапје 'Ћор 115ће' 
крк.аррепа (1+1) 
“"м = 0 
ЈЕ Бкој != 0: ум = агрз[1]/бОкој 
ахгр4.аррепа (им) 
ЈЕ Блпакпо[2] == '1'; # Рдпакпо 'Б51' 
рклплЕ("љ2га. %5 %4а4 +1.36" % (крк[1], агб1[1], 


аг03[1], аг04[1])) 
ке цкп(ахб1, азгр4) # укаса Фор 11561: злома, Екекуепс1је 
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То је прва функција. Рецимо, смештена је у фолдер ' 2: уРућоп ', у модул ' каг ', када се може 
позивати и непосредно наредбама: 


1трокЕ 5у5 

зуз.раћ.аррепа ('р:хРућоп') 
1трокЕ ка 

х,у = каз.51омаРк ('111') 


Имаћете сва три штампања, а у враћеним листама х, у биће „топ листа“ редом великих слова са 
одговарајућим фреквенцијама. Прве две наредбе додају „Питону“ позицију за тражење датотека, 
трећа импортује мој модул, у којем се налазе ове функције, а четврта позива функцију „словних 
фреквенција“ са параметром „111“. 


Следећа је функција зчјомаск(): 


деј з1омабк(рлпа1 = '0000', Рлпа2 = '000'): # кедкез1је 1 дакаћ 


Рлпакпо = 'ррб..5', бр 1п [('0, '1') 


рлпа1: 
"ТЈрбр' а15Екјлрисјја даћлћ 
"Бјрр' Ј1пеакпа кедкезтја 
"Брјр' Кхадкапа кедкезјја 
"Брр1' екзропепсјја1па кедкезјја 
рлпа2: 
"трр' 5Еатра 'ћехЕ' 
"рјр' зЕатра 'ахрики' 
"Бр1' зЕатра 'бор 11561' 
510, Еке = 510омаЕк (рлпа2) 
5 = Јеп(510) 
х = [] 
Кок 1 1п капде(5): х.аррепа(1+1) 
у = Еке 
# касип Ј1пеакпе 1 ракарбојпе кедкез1је 
во = В1 = 82 = А1 = А2 = АЗ = А4 = 0 
Кок 1 1п капде(5): 
во = во + у[л 
в1 = ва + ха] "у[а] 
в2 = 82 + у[1]%х[1]%%2 
А] = А1 + х[1 
А2 = А2 + х[1]%%2 
АЗ = АЗ + х[1]%%3 
АД = АД + х[1]%%4 
резапЕ('А] =', А) 
рејлпЕ('А2 =', А2) 
резапЕ('АЗ =', АЗ) 
рејапЕ('А4 =', А4) 
рклплЕ ('80 =", во) 
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резлЕ('В1 =', В1) 
82) 


рк1лЕ('Вв2а =", 
паг1упак = 5%А2 А1%%2 
ркојпак] = 5%81 - А1“ВО 


ркојпака = дА2%ВО – А1“В1 

ајЕа]1 = а1та2 = 0 

ЈЕ пахјупјк != 0: 
ата] = Ркојпак]/пагјупак 
ајтћа2 = Ркојпак2/пагхјупак 


рејлпЕ('Е(х) = а1хх + а2') 
ре1пЕ ('ајЕа1 =', ајта1) 
ре1пЕ ('ајЕба2 =', а1та2) 
Е1 = [] 


Кок 1 1п капде(5): 
Е1.аррепа (ај Та1х%х [1] + ајга2) 


+ адебекплпаптће Ккапека 
1трокЕ питру аз пр 


дећек0 = пр.аккау ([[А4,АЗ,А2], [АЗ,А2,АТ] , [А2,А1,5]]) 
даећек]1 = пр.аккау([[82,А3,А2], [8В1,А2,А1], [ВО,А1,5]]) 
дећек2 = пр.аккау ([[А4,82,А2], [АЗ,В1,А1] , [А2,80,5]] ) 
дећекз = пр.аккау([[А4,А3,82], [АЗ,А2,81] , [А2 ,А1,80] ] ) 


деко = пр. 1па1д.дае (дебеко) 
де] = пр.11пајд.дае  (дећек1) 
дек2 . Тлпаја. де (девехк2) 
аећз = пр. 1па1д.ае (дећехз) 
#рк1пЕ (деко, адеЕ1, аеЕ2, адез) # зЕатрапје ро роБкебђа 
река1 = Беба2 = Бећаз = 0 
ЈЕ деко != 0: 
бека1 = де 1/деко 
бека2 = дек2/деко 
беказ = дез/деко 


|| 
јој 
го 


рејлплЕ('Е(х) = Б1хх72 + р2г“х + 23') 
ре1пЕ ('рева1 =', Беђа1) 
ре1пЕ('рева2 =', Беђа2) 
рке1пЕ ('реваз =', Беђаз) 


ТтрокЕ табрјо11р.рурјоћ аз р1Е # дкаћ а15Екјрисјје 
ТЕ Рлпа1[0] == '1'; 
рјЕ. аса бек (х, у) 


Екот 5сјру ЈтрокЕ зђаћ5 # дкаћ 11пеакпе кедке51ј 
ТЕ Рлпа1[1] == '1'; 
падјр, ркезек, кг, р, за екк = збаб5. 1 1пкедке55(х, 21) 
аеЕ Еџпк (х): 
кебцикп падјр % х + ркезек 
акт] = 1156 (тар(Ецџпк, х)) 
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'"""р1Е. аса ек (х,Е1) # скба Баске ''' 
рјЕ.рјоВ(х, дк]1) # скЕа Ј1п2ј]ц 


трокЕ пштру аз пр # дакаћ Кмадкабпле кедкез1јје 
х = пр.11п5расе(0, 30, 100) 

х = пр.акапде(0,30,1) 

22 = реба]јх“х%%2 + реба2хх + Бебаз 

ЈЕ рлпа1[2] == '1': 

рјЕ.рјо  (х,Е2) # скЕа ракабојци 


атрокЕ таћ # акаћ екзропепс1јајпе Епџпкс1је 
даља = 0 

ТЕ В! != 0: дата = 1/81 

х = пр.11п5расе(0, 30, 100) 

х = пр.акапде(0,30,1) 
Е3 = дапахпаћ.ех%х“ (-дата“%х) 

ЈЕ рлпа1[3] == '1': 

рјЕе.рјоВ(х,Е3) # скба еКзропепсјјајпи 


рЈјЕ. 5ћом () 
рак = [81, ајЕа1, а1јба2, бећа1, Беђба2, бебаз, дапа]ј 
ке цкп(510, Еке, рак) # з1ома, Екекуепсјје, ракапте кл 


Овакве програме имам у разним верзијама (у модулима), за различите функције и представљања. 
Ако покренете наведени графички модул наредбом 


х, у = каз.51омабк('1111') 


дакле са укључена сва четири за цртањем, 
добићете слику десно, а низови х и у биће 


слова и одговарајуће фреквенције у редоследу ка ју 
„топ листе“. Плаве тачке су дате фреквенције, оло “. 
права линија регресије је плава, регресија а | ~ 
параболом је жута, а четврта експоненцијална је ~ | И 
зелена. о = ро 

#... ~ 
Изостављањем прве јединице (0111) нема тв а 
тачака, друге (1011) нема праве линије, треће “> | • 
(1101) нема параболе, а четврте (1110) нема -п 02 . - 
експоненцијалне регресије. Покушајте даље „ан- - 1 1 _ ОГ · 
комбиновати! 
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66. Друга азбука 

Стил који добар писац има, или тема којој се учењак посветио чине њихов текст читаоцу упућен 
отприлике константним. Те записане мисли упућене свету, примећене и читане, не могу побећи 
законитостима канала преноса, верујем, а само је питање да ли је време или наша моћ таква да 
процесе и формализујемо. 


Из претходних разматрања могли смо научити разлике између једноликих, благо косих и веома 
стрмих графичких расподела вероватноћа слова, а можда такође и речи или идеја. Приметимо ли 
експоненцијалну зависност тих „случајних“ (на сасвим случајан начин могу се појављивати и неки 
процеси у посебним ситуацијама, попут децимала броја пл = 3.14159 ... када их први пут читамо) 
токова, сада знамо да су независни од своје прошлости и зато отпорнији на сметње и промене. 


Поред тога, да су „јасније“ мисли мање информативне, да су „расуте“, зато мутне и неразумљиве 
јер су оптерећене дезинформацијама, да ће препричавањем од уха до уха, кроз генерације такве 
еволуирати у „својствене“ средини која их преноси чинећи тај дуги ланац „црном кутијом“. Али 
остаје отворено питање да ли и шта нам облик графа расподеле дубље казује о емисији, односно 
о језику, аутору, или идејама које се емитују. Може ли тај облик графа бити врста отиска прста, тј. 
нешто попут ДНК емисије 


Каква је разлика између идеја којима се бавимо обзиром на језик којим говоримо и шта можемо 
рећи о доменима нашег бављења – писаним језиком ограниченимг2 Какве би биле разлике између 
текстуалног, сликовног, музичког изражавања, у расподелама симбола њихових „језика“ 2 Назиру 
се многа слична питања која ми тему на којој сам се затекао чине Пандорином кутијом. 


Није ни то крај приче о теорији према којој је информација ткиво простора, времена и материје, а 
њена суштина неизвесност. Пре свега, јер је у таквој теорији „истина“ увек одраз „стварности“, па 
су онда и саме бесконачности (због своје математичке логичности) део неке „реалности“, додуше 
нама апстрактне, али дохватљиве нашем разуму и неизбежне у баратању са уобичајеним питким 
коначностима. Не помишљам у тим „фантазијама“ заобићи нити проблеме које су нам у схватању 
света направили Раселов парадокс (нема скупа свих скупова), Геделова теорема немогућности, 
или поменути „принцип неизвесности“ примењен на „целу“ васиону. 


Другачији, а једнако „чудан пример“ је начин ширења свемира условљен преносом информација 
из његове прошлости у садашњост и будућност. Сметње које су при томе нужне, очито је да споро 
настају, јер галаксије далеке прошлости још увек „јасно“ видимо. Међутим, извесност адаптације 
те информације о стању некадашњости још даљу прошлост учиниће нам „невидљивом“. Не само 
да ће „Велики прасак“ (пре око 13.8 милијарди година) бити у непрозирној магли за фотоне какве 
их познајемо, већ да би и физика још даље прошлости могла бити нама невидљива, несхватљива 
и, штавише, здравом разуму неприхватљива. 


Испоставиће се да ова „кратка скрипта“, како ми је изгледала на почетку писања „Информатичке 
теорије“ , не само да се не може завршити на првом делу, него да неће стати ни са другим. А тек 
сам се припремио расписати се о сепарабилним процесима, па мало озбиљније о континуалним, 
затим Колмогоровљевим, посебно још о дискретним изворима, асимптотским поделама, а да и не 
помињем колико тога имам рећи о кодирању. Међутим, све такве теме мораће на чекање, јер 
преносници порука на којима овде радимо показаће се кореном многих сличних наставака. 
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66.1. Енглески језик 


Размотримо опет исти мој текст „1.4 Феминизација“ из скрипте „Приче о информацији“ којим смо 
се бавили у наслову „65. Регресија“, али сада преведен на енглески „1.4 Еетитгха оп“ у упоредној 
скрипти „погта оп 5топе5“. Бројимо све знакове енглеског текста (4525) и посебно одвајамо сва 
велика и мала слова енглеског алфабета (3661). Резултат је: 


А+а=0 + 256 = 256 
В+6=2 +39 =41 
С+с=3+94=97 
р+а=1+119= 120 
Е+е=2 +463 = 465 
Е+1=4 + 87 = 91 

6 +Е=1+58=59 
Н+ћ=0+175 = 175 
1|+1=7 + 312 = 319 
Ј+]=0+2=2 
К+Кк=0+19=19 
[+|=3+112=115 
М + т = 1+96 = 97 


М + п = 3 + 302 = 305 
О + о = 1 + 294 = 295 
Р+ р=1+64= 65 
а+4=0+6=6 

Е + г= 0 + 230 = 230 
5 + 5 = 1 + 243 = 244 
Т + = 10 + 354 = 364 
ЏО + и = 1 + 99 = 100 
М + м = 0 + 48 = 48 
МУ + м = 4 + 65 = 69 
Х+х=0+10=10 
У+у=0+54 = 54 
2+2=0+15=15 


Након сортирања по броју појављивања слова, добијамо њихов „пласман“: 


Е 465 0.127 
Т 364 0.099 
! 319 0.087 
М 305 0.083 
О 295 0.081 
А 256 0.070 
5 244 0.067 
К 230 0.063 
· Н 175 0.048 


о ~ оре О кУ Р- 


10. 
11. 
12. 
13. 
14. 
15. 
16. 
17. 
18. 


р 120 0.033 19. У 54 0.015 
[ 115 0.031 20. М 48 0.013 
ЏО 100 0.027 21. В 41 0.011 
С 97 0.026 22. К 19 0.005 
М 97 0.026 23. 2 15 0.004 
Е 91 0.025 24. Х 10. 0.003 
М 69 0.019 25. а 6 0.002 
Р 65 0.018 26. Ј 2 0.001 
а 59 0.016 


У последњој колони су фреквенције, тј. „статистичке вероватноће“. То су бројеви претходне 
колоне дељени константним бројем свих слова (3661). Означимо као и пре редне бројеве ове 
листе са Х = (1,2, ...,26), одговарајуће фреквенције у = (0.127, 0.099, ..., 0.001), а са 5 = 26 број 


слова овог алфабета. 


Коефицијенти потребни за израчунавање регресија су В) = У; Ук = 1 и даље редом: 


5 


В, = > Хрук = 7.231904 = џ 


к=1 
5 
Ај = > к—=351 
к=1 
5 
Аз = ЊЕ хЕ = 123201 
к=1 


5 


Ву = > хгук = 82.939634 


к-1 
5 


Ау= >“ =-6201 


А, = > хЕ = 2610621 


к=т 
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На претходно дате начине, помоћу ових коефицијената добијамо једначине линеарне, квадратне 
и експоненцијалне регресије датих фреквенција: 


ћи = а1х + а; ал = –0.004286, а; = 0.096321 
Љаг = Вах“ + Њх + В- В, = 0.000209, # = —0.009923, 4 =0.122625 


1 
ј = уе "= у = — = 0.138276 
Ву 


Графови регресија су: 
Плаве су тачке дате расподеле слова енглеског 


пр текста, плава линија им је линеарна регресија, 

1 4 жута је параболна, а зелена експоненцијална. 

010 1 + 
~, На први поглед нису видљиве иоле битније 

=“ МИ разлике од одговарајућих прошлих расподела 


„истог“ српског текста. Поред овога: 


58) "~ 5, = 4.134927, = 5у, = 4.274688, 
.е' По Зраг = 4.146303, 5, = 3.856565. 


о 5 10 1 20 Ре] | 


Види се да је експоненцијална расподела опет 


најмање информативна, а линеарна највише. Мањи бројеви информација у односу на оне српског 
језика пре свега су последица мањег броја слова. Исте мање вредности информације добијале би 
се и за потпуно насумичне текстове, наиме: 


5 5 
1 1 
5; = – У риЛов рх = – У слов, = 108 5 
к=1 к=1 
када су све вероватноће једнаке ру = 1/5, а има их 5. Међутим, 102; 26 < 105 30, па је зато 


Подсећам да сам због овога, уопште, наглашавао да природа поред „избегавања“ равноправности 
више „воли“ и краће расподеле вероватноћа (мањег броја с), јер „тежи“ мањој информацији, када 
год то може. Са друге стране стоје принципи многострукости, свеприсутности, као и конзервације 
(закона одржања) информације, па овај свет не нестаје. 


Видели смо да су све четири средње вредности (математичка очекивања) оваквих расподела исте 
(овде и = В; = 7.231904), па су им онда једнаке и варијансе 62 = 95.539029, а зато и дисперзије 
в = 9.7744068. Оне су овде мере средње удаљености координата апсцисе (Х-осе) од исте фиксне 
тачке (очекивања и) у свим примерима регресија. Међутим, удаљености дате расподеле: 


ф = 0.060087, аду = 0.027475, аб = 0.033720, 


нису једнаке. Прве две су мање је од одговарајућих српског језика, али је трећа лошија. 
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61.2. Лорем ипсум 

Лорем ипсум је текст коју чува места обично у графичкој, штампаној и издавачкој индустрији за 
преглед распореда и визуелних макета. То је лажни текст који се поставља на празна места током 
припреме штампаног, графичког или веб дизајна. Одломак се приписује непознатом слагачу из 15. 
века за кога се сматра да је шифровао делове Цицероновог „Ре Нтфбиз Вопогит е: Мајогит“, ради 
употребе у књизи примерака типова. Обично почиње са: 


"|огет трзит дојог 51 атећ, сопзестеиг адтрзста е! , зед до еизтод јетрог |пега! аип! и! |абоге е! 
дојоге тавпа аћаџа..." 


Лорем ипсум је намерно дизајниран да нема значење, али да изгледа као прави текст, што га чини 
савршеним чуваром „места“. Погледајмо даље шта може казати статистика о таквом. Десет пасуса 
текста „лорем ипсума“, које сам насумично генерисао за ову прилику, садржи укупно 7195 знака и 
од тога 5981 слова енглеског алфабета (5 = 26), без слова К, М,Х, У, 2: 


1. Е 716 0.120 10. М 281 0.047 19. Е 49 0.008 
2. ! 616 0.103 11. С 258 0.043 20. Н 19 0.003 
3. 5 553 0.092 12. О 218 0.036 21. Ј 1 0.000 
4. Џ 536 0.090 13. 0. 198 0.033 22. К 0 0.000 
5. Т 525 0.088 14. Р 143 0.024 23. М 0 0.000 
6. А 484 0.081 15. М 107 0.018 24. Х 0 0.000 
7. М 381 0.064 16. 6 86 0.014 25. У 0 0.000 
8. |! 344 0.058 17. О 83 0.014 26. 2 0 0.000 
9. К 325 0.054 18. В 58 0.010 


Када се та слова (К, М/, Х, У, 2) избаце, добија се скраћена топ листа (5 = 21): 


1. Е 716 0.120 8. | 344 0.058 15. М 107 0.018 
2. ! 616 0.103 9. К 325 0.054 16. 6 86 0.014 
3. 5 553 0.092 10. М 281 0.047 17. О 83 0.014 
4. Џ 536 0.090 11. С 258 0.043 18. В 58 0.010 
5. Т 525 0.088 12. О 218 0.036 19. БЕ 49 0.008 
6. А 484 0.081 13. 0. 198 0.033 20. Н 19 0.003 
7. М 381 0.064 14. Р 143 0.024 21. Ј 1 0.000 


За линеарну регресију Г (х) = а1х + а, налазимо ај = —0.005767 и а, = 0.1110556. Квадратна 
регресија, парабола ј (х) = 61“ + Врх + Ва је са параметрима 8. = 0.000167, 8; = —0.009438, 
Вз = 0.125126. Средње вредности (очекивања) једнаке су им и = 6.559438, а отуда коефицијент 
у = 1/џ = 0.152452 експоненцијалне регресије ј, (х) = уе “72. 


1. 0.120 0.105 0.116 0.131 8. 0.058 0.065 0.060 0.045 15. 0.018 0.025 0.021 0.015 
2. 0.103 0.100 0.107 0.112 9. 0.054 0.059 0.054 0.039 16. 0.014 0.019 0.017 0.013 
3. 0.092 0.094 0.098 0.096 10. 0.047 0.053 0.047 0.033 17. 0.014 0.013 0.013 0.011 
4. 0.090 0.088 0.090 0.083 11. 0.043 0.048 0.042 0.028 18. 0.010 0.007 0.009 0.010 
5. 0.088 0.082 0.082 0.071 12. 0.036 0.042 0.036 0.024 19. 0.008 0.001 0.006 0.008 
6. 0.081 0.076 0.075 0.061 13. 0.033 0.036 0.031 0.021 20. 0.003 -0.004 0.003 0.007 
7. 0.064 0.071 0.067 0.052 14. 0.024 0.030 0.026 0.018 21. 0.000 -0.010 0.001 0.006 
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На табели је топ листа са упоредним вероватноћама дате, линеарне, квадратне и експоненцијалне 
расподеле редом. Због једнаких очекивања и једнако баждарених апсциса, све четири расподеле 
имају исте варијансе 62 = 56.385256 такође, а онда једнаке и дисперзије с = 7.509012. 


Информације ових расподела: 


5у = 4.316589, 5; = 3.987831, 
5, = 3.952735, 5, = 3.617013, 


показују уједначеност и, очекивано, највећу у случају самих расутих датих тачака и најмању код нај 
стрмије (у почетку) експоненцијалне расподеле. Међутим, максимална могућа информација ових 
слова (5 = 21) је 5) = 105; 21 = 4.392317, што значи да до 5 једва да има „места“. 


Та мала разлика информација, максимална и слова лорем ипсума, 45 = 5) – 5) = 0.075728, је 
„простор“ у којем се ипак могу наћи неке поруке. На пример, могуће је да на мом сајту остављам 
наводно лажни текст лорем ипсума, а да заправо искористим ту мрву његове не-насумичности за 
неко кодирање, које би обучен читаоц негде у свету знао декодирати. Да сви остали имају отворен 
пристум нашим страницама, у уверењу да су бесмислене, док нас два тако комуницирамо. 


Удаљености израчунатих расподела од дате: 


4, = 0.028599, си) Х 
а, = 0.013908, а | ~ 
4, = 0.047638, сло] ЗА 


показују да је за слова лорем ипсума најбоља 206 је .. 
параболна (квадратна) апроксимација, а да је со "~ 
најлошија експоненцијална. То се помало и види пог 3 
на упоредном графу ових дистрибуција, десно. РРА и 
Опет су плаве тачке дате расподеле, а плава је „ . и ~ 5 " 
праволинијска регресија, жута је квадратна. у " " 
Зелена апроксимација је експоненцијална и најлошија је од ових за лорем ипсум. 


Иначе, због веома несразмерних јединица дужина апсцисе и ординате (х и у осе) чини се да је 
линија ових тачака много више нагета него што јесте. Коефицијент праве је —0.006 само, а то је 
мање од 1 одсто! 


61.3. Вижнерова шифра 

Вижнерово шифровање је метода замене азбучног текста коришћењем серије Цезарових шифара, 
заснованих на словима кључа. Ово је прости облик шифре полиалфабетске замене. На тај начин је 
кодиран (М'вепеге) претходни енглески текст [66.1] са кључном речи „ропедеј јак“, који је превод 
српског текста [65.]. Намерно узимам три верзије истог текста, овде детаљно анализиране, ради 
лакшег разумевања даљих резултата. 


Свих знакова тог текста је 4518, а кодних слова 3661, а за разлику од некодираног енглеског без 
малих слова, као што се види из пописа резултата у следећој несортираној табели. Слова збирно 
нађених тамо и овамо има тачно једнако, али нешто од осталих знакова уникод не препознаје. 


Растко Вуковић 


ИНФОРМАТИЧКА ТЕОРИЈА || 


А+а=7125+0=7125 
В+р=132 + 0 = 132 
С+с=184+0 = 184 
р + а = 143 + 0 = 143 
Е+е=182+0=182 
Е+1=88+0 = 88 

6 +Б=135 + 0 = 135 


М+п=121+0=121 
О + о = 150 + 0 = 150 
Р + р = 143 + 0 = 143 
а + а=112+0 =112 
Е+г=221+0=221 
5+5=210+0=210 
Т + = 146 + 0 = 146 


Џ+и=91+0=91 

М + џм = 148 + 0 = 148 

МУ +м =215+0=215 
Х +х = 174 + 0 = 174 

У + у = 106 + 0 = 106 

2+2=76+0=76 


Н+ћ =158 + 0 = 158 
1|+1=188 + 0 = 188 
Ј+]=74+0=74 
К+Кк=79+0=79 

[| + | = 144 + 0 = 144 
М + т=116+0=116 


Већ из ове табеле видимо уједначеност свих могућих (5 = 26) слова, што је нетипично за текстове 
са смислом. Ова уједначеност се још боље види након сортирања: 


1. К 221 0.060 10. М 148 0.040 19. М 116 0.032 
2. М 215 0.059 11. Т 146 0.040 20. О 112 0.031 
3. 5 210 0.057 12. | 144 0.039 21. У 106 0.029 
4. | 188 0.051 13. 0. 143 0.039 22. ЏО 91 0.025 
5. С 184 0.050 14. Р 143 0.039 23. Е 88 0.024 
6. Е 182 0.050 15. 6 135 0.037 24. К 79. 0.022 
7. Х 174 0.048 16. В 132 0.036 25. 2 76 0.021 
8. Н 158 0.043 17. А 125 0.034 26. Ј 74 0.020 
9. О 150 0.041 18. М 121 0.033 


Од највеће (Е: 0,060) до најмање (Ј: 0,020) фреквенције, тј. „статистичке вероватноће“, необично је 
мала разлика. За линеарну регресију 
Ла) = ах + а; 
два су параметра: 
ал = –0.001497, а» = 0.058672. 
За квадратну регресију 


| А. ЉСд = Ви + + 
- | ~ параметри су: 
, 6; = 0.000013, 
003 1 З. В = —0.001849, 
на = ~ Вз = 0.060315. 


=" Средња вредност (математичко очекивање) 


једнако је свим овим расподелама 

и = 11.310571, 
а отуда коефицијент у = 1/џ = 0.088413 експоненцијалне регресије ј, (х) = уе“ У“. На тој слици 
лево, приказани су графови. Експоненцијалну расподелу (зелена линија) видимо као промашај. 


т ~ - т – 
о 5 и У 20 23 30 


Информације ове четири расподеле редом су: 
5у = 4.636296, 5;= 4.637270, 


5 = 4.638081, 5, = 3.989773. 
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Информација потпуно насумичних (5 = 26) слова била би 5) = 102; 26 = 4.700440 и то је највише 
што та слова могу остварити. Дакле, постоји разлика Д5 = 5) – 5у = 0.0638104 која дозвољава 
декодирање Вижнерове шифре. Та је разлика мања од сличне лорем ипсума (0.075728), а што год 
је она мања то је порука дубље сакривена. Са малим узорком текста Вижнеровог кода намогуће је 
декодирање, он је тада „непробојна шифра“ (назив који је тај код дуго носио). Међутим, са дужим 
тако кодираним текстовима има начина дешифровања и они су познати. 


Дистанце ове три расподеле од дате су: 

4, = 0.000099, а, = 0.000088, а, = 0.003573. 
Праволинијска расподела (4) најближа је датој, а експоненцијална (4,) је најдаља. Томе треба 
додати да је коефицијент опадања ове праве једва један промил, ај = —0.001497, а то је тако 


мали број (угао) да би у координатном систему једнаких јединица дужина (апсице и ординате) 
једва приметили њену нагнутост. 


На крају приметимо да су математичко очекивање (средња вредност) и дисперзија (средње 
одступање од средње вредности) дате расподеле: 


и = 11.310571, с = 7.813040. 


Средња вредност распона 5 = 26 једнако вероватних слова била би џи) = 5/26 = 13, а средње 
одступање од такве средње вредности, на начин ове дисперзије израчунато, било би: 


(1— џи): + (2 — и): +: + (5 — иб)2 
5 


бо = = 7.516648, 


што су незнатне разлике од обрађене расподеле. То такође потврђује тежину њеног декодирања, 
да је понашање Вижнерове шифре блиско „црној кутији“. 
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67. Шредингерова мачка 

Прича о Шредингеровој мачки надрасла је своју првобитну мисију, као и сваки занимљив пример 

заснован на тачној науци. Смишљена 1935. од стране аустријског физичара Ервина Шредингера да 
би као мисаони експеримент осветлила тешкоће тумачења тада нове квантне теорије, она је овде 
згодан додатак сагледавања уопште (апстрактних, математичких) канала преноса информација. 


Квантна физика каже да објекат њеног проучавања, попут честице или атома, нема стварност која 
се може утврдити док се не измери. До мерења, својства предмета, као што је импулс, кодирана 
су математичком формулом таласне функције о могућим исходима након мерења. Ово кодирање, 
или (познаваоцима) расветљавање, међутим, наглашава нејасност тих стања пре мерења. 


Од одговора понуђених 1930-их, најдаље је добацила тзв. Копенхагенска интерпретација, коју су у 
данском граду развили светитељи квантне теорије, Нилс Бор и Вернер Хеисенберг. Утврдили су да 
заиста не постоји дефинитивна реалност пре мерења, када је објекат био у недефинисаном стању 

познатом као суперпозиција. Штавише, Хајзенбергов приницп неодређености, који је откривен тих 
година, каже да не можемо сазнавати инхерентне природне параметре честице, посебно положај 

и импулс, или тренутак и енергију, истовремено и тачно. Каже да то није због слабе технике, малог 
знања, или сличних наших ограничења, него због дубљих природних разлога. 


Шредингеров мисаони експеримент истражује како се све ово дешава када се квантни објекат 
пренесе на нешто познатије. Замислио је кутију у којој се налази радиоактивни атом, упакована 
отровна супстанца и мачка. Радиоактивност атома може или не у било ком тренутку учинити да 
отров убије мачку. Ако је копенхагенско тумачење тачно, онда су и пре него што је дошло до било 
каквог мерења, атоми, а тиме и мачка, били у суперпозицији жива-или-мртва мачка. Отварањем 
кутије дешава се мерење и дефинитивно изјашњавање да је мачка или жива или је мртва. 


Развој догађаја у кутији, отварање кутије и стање мачке након процес је и има смисла применити 
на њега сазнања из ове скрипте, ма како нам се то на први поглед чинило апсурдним. На пример, 
како на микро нивоу постоје објективне неизвесности, које се у неким тачкама прекретнице могу 
драстично одражавати на макро плану. Или да будућност може утицати на прошлост 7. 


Ако заиста постоје неизвесности и дубљих разлога од оних које имамо због својих ограничења, то 
повлачи да је периодичности [59. Периодични сигнали] требамо сматрати ограниченим појавама. 
Сви реални процеси тада временом постају „црне кутије“ [61.2. Ергодичка теорема] за евентуалне 
далеке „читаоце“ прошлости. Такође, да можемо прихватити неку врсту реалности опција које се 
нису десиле (О!тепзјоп5). 


Ако смо данас живи, то се стање тада може посматрати и као основа за искључивање мноштава 
могућности из претходне прошлости, каква је, рецимо, да смо јуче настрадали у саобраћају. Оно 
ће се показати једнако „објективним“, тј. ослонцем у научним доказима као, на пример, данашње 
стање смрти некога ко јуче јесте настрадао у саобраћају. Исто би као врсту истине морала видети и 
сама математика, било у данас познатим а несхваћеним моделима, или у још увек неоткривеним. 
Онда је важно и питање реалности обрнутог тока времена, макар то било само за врсте „честица“ 
нама данас, или заувек, потпуно непознате. 


20 Следе не само моја запажања оваквих апсурда. 
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67.1. Дирихлеов принцип 

У својој првобитној употреби Дирихлеов принцип“ каже да ће се у бар једној кућици за голубове 
наћи бар два голуба, ако има више голубова него кућица. Ако је п. + 1 предмета распоређено уп 
посуда (п. = 1,2,3, ...), тада ће бар једна посуда садржавати бар 2 предмета, додајемо. У скупу са 
три природна броја, бар два броја су исте парности (оба парна, или оба непарна). У свакој групи 
од 13 особа, бар две особе имају рођендан у истом месецу. 


Иза ових лакших примера, наизглед безазленог Дирихлеовог принципа, можемо наслутити много 
теже задатке и проблеме, због чега је он честа тема математичких такмичења на највишем нивоу. 
На пример, ако је у оделењу 27 ученика и 13 рачунара, онда постоји бар један рачунар за којим су 
бар три ученика. 


Пример 1. Шест градова су повезани сваки са сваким једном директном линијом, аутобусом или 
железницом, али не обема. Докажимо да међу њима постоје три града која су међусобно везана 
линијама исте врсте. 


Решење. Посматрајмо слику десно. Нека су А, В, С, 0, Е, Е поменутих шест градова. Нека су путеви 
АВ, АС, АО, АЕ, АГ, од којих 5 су бар три исто 
повезани (аутобусом или железницом). Нека су 
то АВ, АС и АР. Везани су рецимо аутобуском 
линијом. Ако и ВС има аутобуску линију, онда је 
задатак решен (АВ, ВС и СА имају аутобуску 
линију). А ако не, онда је ВС железничка веза. 


Међутим, такво закључивање важи за линије 
СО и р8, које нису аутобуске – ако са А нису са 
линијом исте врсте, па су онда те железничке и 
исте су врсте везе са градом В. [] 


Нећемо се даље бавити самим Дирихлеовим принципом, него његовим оспоравањем. Наиме, по 
копенхагенској интерпретацији квантне механике, како је на претходној страни наведено, квантне 
честице пре мерења биће у стању суперпозиције, неке врсте лимбо стварности, као Чардак ни на 
небу ни на земљи: 3. 


Модел сличног стања у „реалности математике“ имамо у тумачењима бесконачности. Издвојићу 
Хилбертов парадокс хотела Гранд (1924), мисаони експеримент који илуструје „неприхватљиво“ 
својство бесконачних скупова. Замислимо хипотетички хотел са пребројиво бесконачним бројем 
соба, од којих су све заузете. Замислимо да тада дође још један гост. 


Управник хотела ће и новог госта сместити у собу, а да сви остали имају смештај. Он ће новог слати 
у собу 1, а госту из собе 1 да оде у собу 2, оном из 2 да оде у 2 и тако даље. Сви гости имаће собе. 
А дође ли п нових гостију, он ће их упутити у првих п соба, претходнике у следећих п, одп + 1 до 
собе 2п, ове у следећих п. соба и тако даље. 


21 бизтам Гејеипе Оипсћје! (1805 – 1859) немачки математичар. 
22 Лимбо – изван стварности, или хришћанско место између неба и пакла, . 
23 Бајка Вука Стефановића Карџића (1853). 
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Такође је могуће примити још пребројиво бесконачно много гостију, тако што старог госта из собе 
1 упутимо у собу 2 и уопште сваког из п-те собе у собу број 21, тако да собе непарног броја остају 
празне за примање бесконачног низа нових гостију. 


Модел је модел, рећи ћете за овакве математичке заврзламе, а стварност је стварност. Међутим, у 
теорији информације коју заступам, истина је стварност, па је и бесконачност предмет интеракција 
са нечим „стварним“, без обзира да ли и ми са таквим имали непосредну интеракцију. То ће бити 
прича о развоју науке, верујем, каква је била о откривању електромагнетног зрачења, од видљиве 
нам светлости до спектра већином нама невидљивог. Такође о егзистенцији звука, од фреквенција 
које можемо чути па до схватања звука као треперења средине фреквенцијама које не чујемо. 


Трећи пример на исту тему „гурања под тепих“ је „заобилажење“ (Вура55). То је концепт, за сада, 
само „теорије информације“. Постулирањем егзистенције објективне случајности и подешавањем 
индуктивне дефиниције дименизије из топологије (Ритепзјоп), показује се да трима просторним 
димензијама треба додати три временске! Идеје долазе почетком 80-их када сам их сматрао само 
апстрактним „игрицама“ са геометријом, да бих тек неколико деценија касније те „светове“ изван 
позатог и признатог 4-дим просторно временског континуума, називао псеудо-реалношћу, потом 
паралелним световима, да бих касније чуо и за „много светова“ квантне механике (Емеге , 1957). 
Разрађивањем је та теорија за мене постајала све прихватљивија. 


Са једне стране, полазећи од „математизоване“ идеје света, да оно што можемо доказати да се не 
може десити – неће се десити, и даље да је истина реалност, а са друге стране, да је информација 
ткиво реалности, на нашу реалност можемо гледати као на врсту „псеудо реалности“. У пакету са 
тиме иде и описивање неке „стварности“ комплексним бројевима, који се у разним прорачунима 
(рецимо збир коњуговано комплексних је реалан број) појављују као реални резултати. 


На тај начин гледајући, ако је коначност крајњи домет моћи наших перцепција (не у математици), 
то још увек не значи да бесконачности, или заобилажења путем паралелне реалности, не постоје. 
Тада на Дирихлеов принцип можемо гледати као апроксимацију реалности макро света који нас 
окружује, као врсту последица закона великих бројева, или још шире као на ону врсту „сила“ које 
настоје да окупљају. 


Садашњост се развија током једне временске линије као информација каналом преноса, аналогно 
начинима трансформације сигнала у својствени преноснику (и преносника сигналу). Препознајемо 
у томе и одрицања од слобода живих јединки ради сигурности, удруживања у колективе, настанак 
већих организаме, али и лењост, инерцију, или закое одржања. Зато је наша стварност побегла из 

бесконачности, а заправо сместила се у једном њеном делуг 


67.2. Путање времена 

Трајекторије садашњости цртају закони инерције, тачније принцип најмањег дејства, или спонтана 
тежња развоја стања у мање информативна, у више вероватна. Обрнуто и једнако тачно, теоријска 
физика рекла би, трајекторије кретања честица решења су Ојлер-Лагранжовим диференцијалних 
једначина – које су опет на „принципу најмањег дејства“ физике Простор-време“ (стр. 54). 


28 брасе-Тите, 1.2.6 Гавгапр!ап, Тћеогет 1.2.10, р. 53. 
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Међутим, протицање времена овде сагледавамо мало даље од званичне физике. Пре свега, то је 
закривљеност 4-дим простор времена теорије релативности у још две димензије времена (Пте5 
ја Кејанм5с Моноп, Мометвег 16, 2014). Сопствени посматрач је делом у времену невидљивом 
релативном посматрачу и отуда релативистичка дилатација времена. 


Брзина протицања времена је (у мојој теорији информације) мања са мањим обимом реализација 
исхода, са мањом укупном количином догађаја посматраног окружења. Зато ће атомски, или било 
који други, часовници посматраног система радити спорије када му комуникације теку спорије. А 
тада је такав мање информативан и, према начелном минимализму, привлачан. Отуда једначине 
опште релативности показују гравитациону привлачност места са споријим током времена. Зато су 
и даље тачке система који ротира привлачне оним ближима центру. 


Слично се дешава и приликом једноликог инерцијалног кретања (специјалне релативности), када 

производ јединица времена и дужина у правцу кретања остаје константан, али за посматрача који 
види кретање оне се мењају тако да су прве веће а друге мање са већом брзином. Сопствени ход 

је опет делом у временима невидљивим релативном, али такав не повлачи простор за собом (што 
се у случају гравитације догађа), а нити делује на простор посматрача, па за честице које би могле 
опажати описана кретања такви дефицити догађаја не постају битни. 


Ефекат привлачности мањка информације налазимо и у привлачности лажи (Тће Тгић), због које 
се оне лакше шире медијима, јер полуистине и фикцију чини привлачнијима за читање од доказа 
математичких ставова. Наиме, лаж је разблажена истина! Сличне законитости тичу се многих оних 
теореме о адаптацији поруке која се преноси каналом (и обрнуто је, али мање присутно), да би се 
након дугог низа таквих константних трансформација порука јављала као својствени вектор, а сам 
канал као црна кутија. 


Када је информација својствени вектор канала, она се не трансформише текући таквим и постиже 
свој оптимум (минимум) избегавања мењања, а вероватноће које је изражавају свој оптимум (оне 
максимум). То посуђујемо из линеарне алгебре и наслућујемо из класичних теорија случајности. 


Друга страна ове приче је такође занимљива. Спонтаност привлачења мањка „количине опција“ 
одговара истој одбијања вишка, као што овде откривано у „сили неизвесности“. Универзалност 
ове појаве мотивише да је тражимо и тамо где никада не бисмо, рецимо у свим врстама физичких 
сила. Даље у том смеру је запажање да свака данас препозната честица физике има неки набој, да 
реагује на неку познату физичку силу. Према томе, додати ћемо, све нама познате физичке силе 
покрећу се сагласно током времена наше садашњости, доследно начелној штедњи информације 
какву је ми видимо. 


Треба бити егоцентричан па веровати да нема других сила само зато што их не можемо видети, ни 
другачијих честица којима би време текло супротно нашем, нити могућности да „псеудо реалност“ 
постоји на начине које не можемо опажати непосредно. У томе ће нас већ сада можда поколебати 
симетрија неких познатих једначина физике на смер времена, а даље то чинити и слободе бирања 
било које четири од шест димензија простор-времена (нове теорије информације), стављањем 
дужине 1с: за временску коориднату. 
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